Стабилизация конвейеров ETL с помощью Airflow, Presto и контрактов метаданных

Среда. 10:04 утра. Панель приборов показывает, что конверсии снизились на 18%. Продукт в панике. Маркетинг тихо игнорирует вас. Но ничего не сломалось - Airflow работает нормально, таблицы Hive обновляются, и журналы пайплайна выглядят идеально чистыми. Именно в этот момент до вас доходит: это не провал. Это что-то хуже. Это тихий дрейф данных.