настроено хранение больших метрик?
Какой период держится в прометее? А прошлые периоды где и как хранятся и как их потом смотреть чтобы сравнивать?)
Мы храним 3 года, но у нас Графит (Graphite+Clickhouse). Все храниться в одном кластере и данные по любым метрикам можно запрашивать за любое окно в этих 3х годах.
А как у вас графит с кликхаусом? Это же не безшовная интеграция ? Это разные источники - один для оперативных данных другой для архивных? Много железа на это уходит?
https://github.com/lomik/graphite-clickhouse схема взаимодействия тут
Спасибо, почитаю
Графит в нашем случае это обвязка поверх КХ, обеспечивающая транспорт и чтение метрик. Для всех данных используется 1 база с 4мя таблицами. Поверх таблицы с историческими данными навешан процесс rollup, который позволяет "схлопывать" точки по метрикам старше 35+ дней в 5ти минутные агрегаты. Есть мини версия нашего стека в docker-compose тут: https://github.com/kolobaev/graphite-clickhouse-tldr
спасибо, посмотрю
Обсуждают сегодня