updated_at
snapshots:
- name: snapshot
relation: source('my_source', 'my_table')
config:
strategy: timestamp
updated_at: column_name
snapshots:
<resource-path>:
+strategy: timestamp
+updated_at: column_name
Вы получите предупреждение, если тип данных столбца updated_at не соответствует настроенному по умолчанию адаптеру.
Описание
Столбец в результатах вашего снимка, который представляет, когда строка записи была обновлена в последний раз.
Этот параметр обязателен при использовании strategy timestamp. Поле updated_at может поддерживать строки дат в формате ISO и целые числа unix epoch — в зависимости от используемой вами платформы данных.
По умолчанию
Значение по умолчанию не предоставляется.
Примеры
Использование имени столбца updated_at
(Версии dbt: v1.9 и новее) snapshots:
- name: orders_snapshot
relation: source('jaffle_shop', 'orders')
config:
schema: snapshots
unique_key: id
strategy: timestamp
updated_at: updated_at
Объединение двух столбцов для создания надежного столбца updated_at
Рассмотрим источник данных, в котором столбец updated_at заполняется только при обновлении записи (поэтому значение null указывает на то, что запись не была обновлена после создания).
Поскольку конфигурация updated_at принимает только имя столбца, а не выражение, вам следует обновить запрос снимка, чтобы включить объединенный столбец.
-
Создайте промежуточную модель для выполнения преобразования. В вашем каталоге
models/создайте SQL-файл, который настраивает промежуточную модель для объединения столбцовupdated_atиcreated_atв новый столбецupdated_at_for_snapshot.models/staging_orders.sqlselect * coalesce (updated_at, created_at) as updated_at_for_snapshot
from {{ source('jaffle_shop', 'orders') }} -
Определите конфигурацию снимка в YAML-файле. В вашем каталоге
snapshots/создайте YAML-файл, который определяет ваш снимок и ссылается на только что созданную промежуточную модельupdated_at_for_snapshot.snapshots/orders_snapshot.ymlsnapshots:
- name: orders_snapshot
relation: ref('staging_orders')
config:
schema: snapshots
unique_key: id
strategy: timestamp
updated_at: updated_at_for_snapshot -
Запустите
dbt snapshot, чтобы выполнить снимок.
В качестве альтернативы, вы также можете создать эфемерную модель для выполнения необходимых преобразований. Затем вы ссылаетесь на эту модель в ключе relation вашего снимка.