Отчёт показал ноль заказов за последний час, хотя магазин работал
Витрина заказов в DWH обновляется DAG в Airflow каждый час. Ночью одна из задач DAG упала, следующие запуски не стартовали из-за зависимости. Утром дашборд показывал резкое падение заказов, и полдня команда искала проблему в продукте.
Что стоило заложить в витрину и дашборд?
- Показывать свежесть данных и алертить о задержке
- Обновлять витрину чаще, раз в 10 минут
- Показывать данные только за прошлую неделю
- Перезапускать DAG вручную каждое утро