Backfill — запуск DAG на исторических интервалах (CLI airflow dags backfill или catchup), чтобы заполнить прошлые данные после деплоя/починки.
Разбор
- Требует идемпотентных tasks.
- Ограничивайте параллелизм, чтобы не убить DWH.
- Catchup=True автоматически догоняет с start_date — опасно на prod без контроля.
- После backfill сверяйте partition counts.
Итог
Backfill пересчитывает историю; безопасен только с идемпотентностью и лимитами нагрузки.