Перейти к основному содержимому

Изменения в поведении адаптера Amazon Redshift

Ниже перечислены текущие флаги изменения поведения, специфичные для dbt-redshift:

Флагdbt-redshift: Введениеdbt-redshift: ЗрелостьСтатус
redshift_skip_autocommit_transaction_statements1.12.0Пока не определеноАктивен

Флаг redshift_skip_autocommit_transaction_statements​

Доступен начиная с dbt-redshift 1.12.0.

Флаг redshift_skip_autocommit_transaction_statements определяет, отправляет ли dbt явные операторы BEGIN, COMMIT и ROLLBACK в Amazon Redshift, когда включён режим автоматической фиксации транзакций (autocommit). Начиная с dbt-redshift 1.5, подключение к Redshift по умолчанию использует autocommit=True, поэтому драйвер уже фиксирует каждый оператор. В такой конфигурации при включённом autocommit эти операторы избыточны и приводят к дополнительным обменам запросами и ответами с Redshift.

  • При значении false (по умолчанию) dbt отправляет операторы BEGIN, COMMIT и ROLLBACK (прежнее поведение).

  • При значении true dbt не отправляет операторы BEGIN, COMMIT и ROLLBACK в Redshift, что может сократить количество обменов запросами и ответами и повысить производительность. dbt по-прежнему вызывает begin(), commit() и rollback_if_open() для подключения, но больше не выполняет соответствующие SQL-операторы:

    • begin() вызывается, но dbt не выполняет BEGIN в Redshift.
    • commit() вызывается, но dbt не выполняет COMMIT в Redshift.
    • rollback_if_open() вызывается, но dbt не выполняет ROLLBACK в Redshift.

dbt по-прежнему поддерживает внутреннее состояние transaction_open, поэтому отслеживание транзакций остаётся согласованным, даже когда эти SQL-операторы пропускаются.

Чтобы пропускать ненужные операторы управления транзакциями при включённом autocommit, установите для флага значение true в файле dbt_project.yml:

dbt_project.yml
flags:
redshift_skip_autocommit_transaction_statements: true

Как этот флаг взаимодействует с autocommit​

  • Если подключение использует autocommit=False, поведение dbt при явном управлении транзакциями не меняется.
  • Если подключение использует autocommit=True (по умолчанию), а флаг имеет значение false (по умолчанию), dbt по-прежнему отправляет BEGIN, COMMIT и ROLLBACK.
  • Если подключение использует autocommit=True, а флаг имеет значение true, dbt пропускает эти операторы.

Нашли ошибку?

0
Loading