Перейти к основному содержимому

Настройка Rockset

Плагин с поддержкой от поставщика

Некоторые основные функции могут отличаться. Если вы хотите сообщить об ошибке, запросить функцию или внести свой вклад, вы можете посетить связанный репозиторий и открыть задачу.

  • Поддерживается: Rockset, Inc.
  • Авторы: Rockset, Inc.
  • Репозиторий GitHub: rockset/dbt-rockset
  • Пакет PyPI: dbt-rockset
  • Канал в Slack: #dbt-rockset
  • Поддерживаемая версия dbt Core: v0.19.2 и новее
  • Поддержка dbt: Not Supported
  • Минимальная версия платформы данных: ?

Установка dbt-rockset

Установите адаптер с помощью pip. До версии 1.8 установка адаптера автоматически устанавливала dbt-core и любые дополнительные зависимости. Начиная с 1.8 установка адаптера не устанавливает dbt-core автоматически. Это потому, что версии адаптеров и dbt Core были развязаны, и мы больше не хотим перезаписывать существующие установки dbt-core. Используйте следующую команду для установки:

python -m pip install dbt-core dbt-rockset

Настройка dbt-rockset

Конфигурацию, специфичную для Rockset, см. на странице настроек Rockset.

Подключение к Rockset с помощью dbt-rockset​

Профиль dbt для Rockset очень прост и содержит следующие поля:

profiles.yml
rockset:
  target: dev
  outputs:
    dev:
      type: rockset
      workspace: [schema]
      api_key: [api_key]
      api_server: [api_server] # (По умолчанию api.rs2.usw2.rockset.com)

Материализации​

ТипПоддерживается?Подробности
viewДАСоздает представление.
tableДАСоздает коллекцию.
ephemeralДАВыполняет запросы с использованием CTE.
incrementalДАСоздает коллекцию, если она не существует, и затем записывает в нее результаты.
Loading table...

Предостережения​

  1. unique_key не поддерживается с incremental, если только он не установлен в _id, который в любом случае действует как естественный unique_key в Rockset.
  2. materialization table работает медленнее в Rockset, чем в большинстве других систем, из-за архитектуры Rockset как базы данных с низкой задержкой и в реальном времени. Создание новых коллекций требует выделения горячего хранилища для индексации и обслуживания свежих данных, что занимает около минуты.
  3. Запросы Rockset имеют тайм-аут в две минуты. Любая модель, которая выполняет запрос, занимающий более двух минут, завершится с ошибкой.

Нашли ошибку?

0
Loading