DZone.com Feed на русском
Подписаться
Когда проверки качества данных проходят, но данные все еще устарели
Конвейер может завершиться успешно, схемы могут совпадать, а проверки на null могут пройти, в то время как бизнес все еще смотрит на вчерашние данные. Свежесть данных заслуживает собственной модели качества.Конвейер успешно завершился. Схема совпала. Требуемые поля присутствовали, диапазоны были разумными, а панель мониторинга обновилась по расписанию. Все проверки качества были пройдены. Цифра на экране все еще была неверной, потому что она была построена на данных, которые перестали обновляться два дня назад, и никто этого не заметил.