В Airflow 2.4+ Dataset URI связывают producer task и consumer DAG: обновление датасета триггерит downstream без хрупкого cron-сопряжения.
Разбор
- Удобно для multi-DAG data dependencies.
- Не заменяет контроль качества данных.
- Комбинируйте с расписанием для mixed триггеров.
- Имена URI стандартизируйте как контракт.
Итог
Datasets дают event-связь пайплайнов по обновлению данных.
