Prometheus, за который я отвечал, вырос до более чем 900 ГБ временных рядов данных, и при таком размере он приобрел все сопутствующие проблемы.Запросы истекали, если их не сужать до одного часа. Кардинальность продолжала расти, потому что команды добавляли метки "для отладки", а затем иногда забывали их удалить. Вдобавок ко всему, мы отправляли копии фрагментов наших метрических данных внешнему SaaS-поставщику, на всякий случай, и этот счет рос каждый квартал. А парк серверов, на которых все это работало, обслуживал чувствительные к задержкам торговые сервисы, поэтому самому мониторингу не разрешалось потреблять лишнее процессорное ядро в неподходящий момент.