Разбор
Частичный парсинг
(Версии dbt: v2.0 и новее)Запуски заданий dbt v2 больше не поддерживают флаги CLI --partial-parse и --no-partial-parse. Если вы передадите их (например, в команде или скрипте dbt v1), dbt запишет в журнал предупреждение об устаревании dbt1700. Удалите эти флаги из команд запуска заданий dbt v2. Подробнее см. в разделе Устаревшие флаги руководства по переходу на dbt v2.
Флаг PARTIAL_PARSE позволяет включать и отключать частичный парсинг в вашем проекте. Подробнее см. в документации по парсингу.
flags:
partial_parse: true
dbt run --no-partial-parse
Статический парсер
Конфигурация STATIC_PARSER может включать или отключать использование статического парсера. Подробнее см. в документации по разбору.
config:
static_parser: true
Включение парсера v2
(Версии dbt: v1.12 и новее)Флаг парсера v2 применяется только к dbt v1.12 и более поздним версиям ветки 1.x. Если вы уже используете v2, этот флаг ни на что не влияет.
Флаг use_v2_parser передаёт обработку проекта парсеру v2. Этот флаг нужно включать явно.
Парсер v2 — это парсер на Rust из dbt v2. Он значительно быстрее парсера v1 на Python, особенно на крупных проектах, где ускорение может достигать 5–10 раз. Его включение может ускорить процесс разработки и сократить время запуска заданий. Поскольку флаг передаёт обработку парсеру, используемому в v2.0, это также способ проверить совместимость с v2 из dbt v1.12 с минимальным риском.
Включить парсер v2 можно тремя способами:
- Флаг CLI:
--use-v2-parser - Переменная окружения:
DBT_ENGINE_USE_V2_PARSER=true - В файле
dbt_project.ymlв разделеflags::
flags:
use_v2_parser: true
Примечание: при включённом флаге --use-v2-parser частичный разбор отключён. Любой устаревший файл partial_parse.msgpack, оставшийся от предыдущего запуска, автоматически удаляется.
Поскольку флаг влияет только на разбор проекта, самый быстрый способ проверить совместимость с парсером v2 — выполнить dbt parse. Вы также можете использовать --use-v2-parser с любой другой командой.
# Проверка совместимости с парсером v2 без запуска моделей (рекомендуется)
dbt parse --use-v2-parser
# Или использование с любой командой
dbt run --use-v2-parser
Хуки плагинов get_nodes не поддерживаются при включённом флаге --use-v2-parser.