Изменения в поведении адаптера Amazon Redshift
Ниже перечислены текущие флаги изменения поведения, специфичные для dbt-redshift:
| Флаг | dbt-redshift: Введение | dbt-redshift: Зрелость | Статус |
|---|---|---|---|
redshift_skip_autocommit_transaction_statements | 1.12.0 | Пока не определено | Активен |
Флаг redshift_skip_autocommit_transaction_statements
Доступен начиная с dbt-redshift 1.12.0.
Флаг redshift_skip_autocommit_transaction_statements определяет, отправляет ли dbt явные операторы BEGIN, COMMIT и ROLLBACK в Amazon Redshift, когда включён режим автоматической фиксации транзакций (autocommit). Начиная с dbt-redshift 1.5, подключение к Redshift по умолчанию использует autocommit=True, поэтому драйвер уже фиксирует каждый оператор. В такой конфигурации при включённом autocommit эти операторы избыточны и приводят к дополнительным обменам запросами и ответами с Redshift.
-
При значении
false(по умолчанию) dbt отправляет операторыBEGIN,COMMITиROLLBACK(прежнее поведение). -
При значении
truedbt не отправляет операторыBEGIN,COMMITиROLLBACKв Redshift, что может сократить количество обменов запросами и ответами и повысить производительность. dbt по-прежнему вызываетbegin(),commit()иrollback_if_open()для подключения, но больше не выполняет соответствующие SQL-операторы:begin()вызывается, но dbt не выполняетBEGINв Redshift.commit()вызывается, но dbt не выполняетCOMMITв Redshift.rollback_if_open()вызывается, но dbt не выполняетROLLBACKв Redshift.
dbt по-прежнему поддерживает внутреннее состояние transaction_open, поэтому отслеживание транзакций остаётся согласованным, даже когда эти SQL-операторы пропускаются.
Чтобы пропускать ненужные операторы управления транзакциями при включённом autocommit, установите для флага значение true в файле dbt_project.yml:
flags:
redshift_skip_autocommit_transaction_statements: true
Как этот флаг взаимодействует с autocommit
- Если подключение использует
autocommit=False, поведение dbt при явном управлении транзакциями не меняется. - Если подключение использует
autocommit=True(по умолчанию), а флаг имеет значениеfalse(по умолчанию), dbt по-прежнему отправляетBEGIN,COMMITиROLLBACK. - Если подключение использует
autocommit=True, а флаг имеет значениеtrue, dbt пропускает эти операторы.