Введение в Семантический слой dbt
Обратите внимание: в этом руководстве по лучшим практикам пока не используется новая спецификация YAML. Мы работаем над обновлением руководства, чтобы вскоре оно соответствовало новой спецификации и структуре файлов!
Подробнее о новой спецификации см. в разделе Создание метрик.
Летающие автомобили, ховерборды и по-настоящему самостоятельная аналитика: вот какое будущее нам обещали. Первые два изобретения, возможно, придётся подождать ещё несколько лет, но настоящая самостоятельная аналитика доступна уже сегодня. С помощью Semantic Layer от dbt вы можете разрешить противоречие между точностью и гибкостью, которое годами ограничивало аналитические инструменты, и дать каждому в вашей организации возможность исследовать метрики на основе единого представления о данных. А главное для инженеров по аналитике — использование этих новых инструментов поможет существенно сократить дублирование в кодовой базе в соответствии с принципом DRY и упростить её. Как вы увидите, тесная взаимосвязь между вашими моделями dbt и Semantic Layer делает ваш проект dbt идеальным местом для создания метрик.
И что особенно приятно для аналитических инженеров — работа с этими новыми инструментами существенно DRY-фицирует и упрощает ваш код. Как вы увидите далее, тесное взаимодействие между вашими моделями dbt и Semantic Layer делает dbt‑проект идеальным местом для создания и управления метриками.
Цели обучения
- ❓ Понять назначение и возможности Semantic Layer, в частности роль MetricFlow как движка, на котором он работает.
- 🧱 Иметь представление об основных компонентах MetricFlow — semantic models и metrics — и о том, как они работают вместе.
- 🔁 Знать, как рефакторить dbt‑модели для использования с Semantic Layer.
- 🏅 Быть осведомлённым о best practices, позволяющих получить максимальную пользу от Semantic Layer.
Обзор структуры руководства
- Настройка вашего dbt‑проекта.
- Создание семантической модели и её фундаментальных частей: entities, dimensions и measures.
- Создание метрики.
- Определение расширенных метрик: типов
ratioиderived. - Структура файлов и папок: выстраивание системы именования.
- Рефакторинг marts и roll‑ups для Semantic Layer.
- Обзор лучших практик.
Если вы готовы предоставить вашим пользователям больше возможностей и гибкости с меньшим количеством кода, давайте начнем!
MetricFlow — это движок для определения метрик в dbt и один из ключевых компонентов Semantic Layer. Он отвечает за построение SQL-запросов и определяет спецификацию для семантических моделей и метрик dbt.
Чтобы использовать все возможности Semantic Layer, включая выполнение запросов к метрикам dbt через внешние интеграции, вам понадобится аккаунт dbt на тарифе Starter, Enterprise или Enterprise+. Дополнительную информацию см. в разделе часто задаваемых вопросов о Semantic Layer.