Подключение Databricks
Адаптер dbt-databricks поддерживается командой Databricks. Команда Databricks стремится поддерживать и улучшать адаптер со временем, поэтому вы можете быть уверены, что интегрированный опыт предоставит лучшее от dbt и лучшее от Databricks. Подключение к Databricks через dbt-spark устарело.
О адаптере dbt-databricks
dbt-databricks совместим со следующими версиями dbt Core в dbt с различной степенью функциональности.
| Loading table... |
Адаптер dbt-databricks предлагает:
- Более простая настройка
- Лучшие значения по умолчанию: Адаптер dbt-databricks более определен, направляя пользователей к улучшенному опыту с меньшими усилиями. Дизайнерские решения этого адаптера включают использование формата Delta по умолчанию, использование merge для инкрементных моделей и выполнение затратных запросов с Photon.
- Поддержка Unity Catalog: Unity Catalog позволяет пользователям Databricks централизованно управлять всеми данными, упрощая управление доступом и улучшая производительность поиска и запросов. Пользователи Databricks теперь могут получить трехуровневую иерархию данных – каталог, схема, имя модели – что решает давнюю проблему в организации и управлении данными.
Чтобы узнать, как оптимизировать производительность с помощью конфигураций, специфичных для конкретной платформы данных, в dbt, обратитесь к разделу Databricks-specific configuration.
Чтобы предоставить пользователям или ролям разрешения на базу данных (права доступа и привилегии), обратитесь к странице примеров разрешений.
Для настройки подключения к Databricks укажите следующие поля:
| Loading table... |
Настройка подключения к Databricks с использованием адаптера dbt-databricks