Перейти к основному содержимому

Операторы над множествами

Объединения и пересечения комбинируют выражения выбора, когда вы указываете несколько аргументов для --select или --exclude. Выражение выбора определяет подмножество узлов вашего проекта (моделей, тестов, seed-файлов и других типов ресурсов), чтобы вам не приходилось запускать весь DAG. Полное описание языка выбора и именованных селекторов в selectors.yml см. в разделах Обзор синтаксиса и Селекторы YAML.

Объединения​

Объединение выбирает узлы, соответствующие хотя бы одному из нескольких выражений. Для аргументов --select или --exclude оно действует как логическое «ИЛИ».

Для объединения передайте аргументы через пробел. dbt применяет к каждому аргументу обычные правила: методы выбора и операторы графа. Затем результаты объединяются, и каждый узел входит в итоговую выборку только один раз.

В примере два выражения. Оператор + включает модель и её предков, а пробел объединяет результаты:

dbt run --select "+snowplow_sessions +fct_orders"

Это поведение отличается от пересечения, при котором аргументы, разделённые запятыми без пробелов, требуют, чтобы ресурс одновременно соответствовал всем критериям.

Пересечения​

Пересечение сохраняет только те узлы, которые соответствуют каждому выражению селектора; чтобы остаться в итоговом наборе, ресурс должен соответствовать всем аргументам, разделённым запятыми.

Для пересечения укажите аргументы --select или --exclude через запятую без пробелов. Пробел по-прежнему означает объединение. dbt применяет методы выбора, операторы графа и другие обычные правила, а затем оставляет только ресурсы, подходящие под все аргументы. Порядок аргументов через запятую на результат не влияет.

Примеры пересечений:

Выбрать общие вышестоящие узлы, от которых зависят и snowplow_sessions, и fct_orders:

dbt run --select "+snowplow_sessions,+fct_orders"

Выбрать общие зависимые узлы для stg_invoices и stg_accounts:

dbt run --select "stg_invoices+,stg_accounts+"

Выбрать модели по пути marts/finance с тегом nightly:

dbt run --select "marts.finance,tag:nightly"

Объединение и пересечение в одной команде​

В одном значении --select или --exclude можно сочетать объединение и пересечение. dbt вычисляет каждый аргумент, разделённый пробелом, отдельно: запятые без пробелов внутри аргумента задают пересечение, а пробелы между аргументами объединяют результаты.

В следующей команде два аргумента разделены пробелом, и каждый задаёт пересечение:

  • +snowplow_sessions,+fct_orders выбирает узлы, от которых зависят обе модели, snowplow_sessions и fct_orders.
  • marts.finance,tag:nightly выбирает модели по пути marts/finance с тегом nightly.

Пробел между аргументами объединяет оба результата:

dbt run --select "+snowplow_sessions,+fct_orders marts.finance,tag:nightly"

Нашли ошибку?

0
Loading