Подключение Apache Spark
dbt-databricksЕсли вы используете Databricks, рекомендуется использовать адаптер dbt-databricks вместо dbt-spark. Если вы все еще используете dbt-spark с Databricks, рассмотрите возможность миграции с адаптера dbt-spark на адаптер dbt-databricks.
Для версии этой страницы для Databricks обратитесь к разделу Настройка Databricks.
См. Подключение Databricks для версии этой страницы для Databricks.
dbt поддерживает подключение к кластеру Apache Spark с использованием HTTP-метода или метода Thrift. Примечание: хотя HTTP-метод можно использовать для подключения к all-purpose кластеру Databricks, для всех подключений к Databricks рекомендуется использовать ODBC-метод. Подробнее о настройке этих параметров подключения см. в документации dbt-spark.
Чтобы узнать, как оптимизировать производительность с помощью платформенно-специфичных настроек данных в dbt, см. конфигурации, специфичные для Apache Spark.
Следующие поля доступны при создании подключения Apache Spark с использованием методов подключения HTTP и Thrift:
| Loading table... |
Настройка подключения Spark