# Создание событий Datadog из результатов dbt

[Назад к гайдам](https://docs.getdbt.tech/guides.md)

[Menu ]()



## Введение

В этом руководстве вы узнаете, как создать и разместить простое приложение на Python, которое будет добавлять события заданий dbt в Datadog. Для этого после завершения задания dbt приложение будет создавать запись в журнале для каждого выполненного узла, содержащую всю информацию об этом узле, предоставляемую [Discovery API](https://docs.getdbt.tech/docs/dbt-apis/discovery-schema-job-models.md).

В этом примере мы будем использовать [fly.io](https://fly.io) для хостинга и запуска сервиса. fly.io — это платформа для запуска полнофункциональных приложений без необходимости настраивать серверы и сопутствующую инфраструктуру. Такой уровень использования без проблем укладывается в рамки бесплатного тарифа. Вы также можете использовать альтернативные инструменты, такие как [AWS Lambda](https://ademoverflow.com/en/posts/tutorial-fastapi-aws-lambda-serverless/) или [Google Cloud Run](https://github.com/sekR4/FastAPI-on-Google-Cloud-Run).

### Предварительные требования

В этом руководстве предполагается, что вы уже знакомы со следующим:

В этом руководстве предполагается, что вы уже знакомы с:

* [Вебхуками dbt](https://docs.getdbt.tech/docs/deploy/webhooks.md)
* Приложениями командной строки
* Развертыванием кода в бессерверной среде выполнения, такой как fly.io или AWS Lambda

## Клонирование репозитория `dbt-cloud-webhooks-datadog`

[Этот репозиторий](https://github.com/dpguthrie/dbt-cloud-webhooks-datadog) содержит пример кода для проверки вебхука и создания логов в Datadog.

## Установка `flyctl` и регистрация на fly.io

Следуйте инструкциям для вашей операционной системы в [документации fly.io](https://fly.io/docs/hands-on/install-flyctl/), затем выполните следующие команды в командной строке:

Перейдите в директорию, содержащую клонированный вами репозиторий на шаге 1:

```shell
#пример: замените на ваш фактический путь
cd ~/Documents/GitHub/dbt-cloud-webhooks-datadog
```

Зарегистрируйтесь на fly.io:

```shell
flyctl auth signup
```

Ваша консоль должна показать `successfully logged in as YOUR_EMAIL`, когда вы закончите, но если этого не произошло, войдите в fly.io из командной строки:

```shell
flyctl auth login
```

## Запуск вашего приложения на fly.io

Запуск вашего приложения публикует его в интернете и делает готовым к приему событий вебхуков:

```shell
flyctl launch
```

1. Вы увидите сообщение о том, что найден существующий файл `fly.toml`. Введите `y`, чтобы скопировать его конфигурацию в ваше новое приложение.

2. Выберите имя приложения по вашему выбору, например, `YOUR_COMPANY-dbt-cloud-webhook-datadog`, или оставьте поле пустым, и имя будет сгенерировано автоматически. Обратите внимание, что имя может содержать только цифры, строчные буквы и дефисы.

3. Выберите регион для развертывания и запомните сгенерированное имя хоста (обычно `APP_NAME.fly.dev`).

4. Когда вас спросят, хотите ли вы настроить базы данных Postgresql или Redis, введите `n` для каждого.

5. Введите `y`, когда вас спросят, хотите ли вы развернуть приложение сейчас.

Пример вывода мастера настройки:

``

`joel@Joel-Labes dbt-cloud-webhooks-datadog % flyctl launch
An existing fly.toml file was found for app dbt-cloud-webhooks-datadog
? Would you like to copy its configuration to the new app? Yes
Creating app in /Users/joel/Documents/GitHub/dbt-cloud-webhooks-datadog
Scanning source code
Detected a Dockerfile app
? Choose an app name (leave blank to generate one): demo-dbt-cloud-webhook-datadog
automatically selected personal organization: Joel Labes
Some regions require a paid plan (fra, maa).
See https://fly.io/plans to set up a plan.
? Choose a region for deployment: [Use arrows to move, type to filter]
? Choose a region for deployment: Sydney, Australia (syd)
Created app dbtlabs-dbt-cloud-webhook-datadog in organization personal
Admin URL: https://fly.io/apps/demo-dbt-cloud-webhook-datadog
Hostname: demo-dbt-cloud-webhook-datadog.fly.dev
? Would you like to set up a Postgresql database now? No
? Would you like to set up an Upstash Redis database now? No
Wrote config file fly.toml
? Would you like to deploy now? Yes`

### 4. Создание API-ключа Datadog

[Создайте API-ключ для вашего аккаунта Datadog](https://docs.datadoghq.com/account_management/api-app-keys/) и запомните его и ваш сайт Datadog (например, `datadoghq.com`) для дальнейшего использования.

## Настройка нового вебхука в dbt

1. См. [Создание подписки на вебхук](https://docs.getdbt.tech/docs/deploy/webhooks.md#create-a-webhook-subscription) для получения полных инструкций. Ваше событие должно быть **Run completed**.
2. Установите URL вебхука на имя хоста, которое вы создали ранее (`APP_NAME.fly.dev`).
3. Запомните секретный ключ вебхука для дальнейшего использования.

*Не тестируйте конечную точку*; она не будет работать, пока вы не сохраните ключи аутентификации (следующий шаг).

## Хранение секретов

Для работы приложения необходимо задать четыре секрета со следующими именами:

* `DBT_CLOUD_SERVICE_TOKEN`: dbt [токен персонального доступа](https://docs.getdbt.tech/docs/dbt-apis/user-tokens.md) или [токен сервисной учётной записи](https://docs.getdbt.tech/docs/dbt-apis/service-tokens.md) как минимум с разрешением `Metadata Only`.
* `DBT_CLOUD_AUTH_TOKEN`: секретный ключ вебхука dbt, созданного ранее.
* `DD_API_KEY`: ключ API, созданный ранее.
* `DD_SITE`: сайт Datadog для вашей организации, например `datadoghq.com`.

Установите эти секреты следующим образом, заменив `abc123` и т.д. на фактические значения:

```shell
flyctl secrets set DBT_CLOUD_SERVICE_TOKEN=abc123 DBT_CLOUD_AUTH_TOKEN=def456 DD_API_KEY=ghi789 DD_SITE=datadoghq.com
```

## Развертывание вашего приложения

После того как вы зададите секреты, fly.io повторно развернёт ваше приложение. Когда развёртывание успешно завершится, вернитесь к настройкам вебхука dbt и нажмите **Test Endpoint**.
