Подскажите плиз как поступают правильно в такой ситуации есть относительно

большой кластер кубера в котором относительно часто поднимаются и останавливаются поды (типа запуски тестирования софта).

на каждой ноде кубера есть node-exporter который экспортит тучу метрик, в том числе по каждому поду.

В результате получаем очень много короткоживущих серий которые занимают место, портят перформанс и тд.

Как с этим справляться? Я вижу два пути - фильтровать такие серии либо строить двухуровневый кластер и отправлять короткоживущии серии туда. Оба варианта требуют серьезной поддержки - в первом случае нужно аккуратно отбрасывать только ненужное, во втором - нужен вторй кластер для короткоживущих серий.

2 ответов

19 просмотров

Чтобы ответить на этот вопрос, сначала нужно понять - нужны ли Вам этим метрики :) Если нет - фильтровать их as early as possible, включая отключение ненужных коллекторов в node exporter'e, фильтрацией в vmagent. Если да, но только на небольшой срок - то городить схему с разными retention'ами для разных групп метрик. Но тут коллеги подскажут, как это сделать эффективнее. На мой взгляд, именно victoria/prometheus тут не очень подходят в целом (т.к. нет функционала, например, как .retention policy в influx)

ik- Автор вопроса
Konstantin Kornienko
Чтобы ответить на этот вопрос, сначала нужно понят...

На вопрос нужны метрики или нет я тоже не очень могу ответить так как по некоторым из этих короткодивущих метрик могу стрлиться алерты и заранее неизвестно по каким именно. Достоверно известно что уже через неделю они будут ненужны

Похожие вопросы

Обсуждают сегодня

Всем привет) Я попробовал турбо роутер октябрьский. Вроде доволен, но возникла проблемка) Бутстраповские модалки плодят .modal-backdrop элементы Если модалка открыта, должне...
Виталий
3
Так а кто может спарсить всех участников чата? Идишники
Magic
18
да пофиг на капчу зашел в чат и молчишь при этом ты нонейм? пошел вон
Magic
17
Как удалить health check в Consul? Казалось бы, это должно быть не сложно, но я не могу найти в документации ничего про это, только про добавление service с health check "в н...
Roman
2
Привет, кто может сделать юзербота с апи? Задачи: - создавать группы - создавать каналы - задавать для созданных каналов аватарку или эмоджи, имя группы - добавлять в группы...
Lencore
13
Хотя вроде админка показывает удаленные модели, да? @dblackCat
Виталий
2
Privet! Mozhet jesti ideji - nemogu sdelatj upload backup s filestore cerez WEB. Fail okolo 450mb, eto mozhet bitj prichinoi? Nemogu ponjatj..kak zagruzitj backup... Poluchaju...
Matiss 🤘 Black Oak IT 🌳 Batumi 🌴 Latvija
5
Нужно магазин с тильды на опен кат перенести Есть кто умеет? В лс
Magic
8
Всем доброго вечера! Хочу поделиться своим злоключением с человеком, который, как оказалось сюда тоже скидывал свое резюме. Жаль, что я вашу группу не нашел раньше… человек ки...
Роман Ахмедзянов
4
А кто знает в тейлоре до сих пор есть конфликты слагов или поправили уже?
Black Cat
5
Карта сайта