забирает из кафки сообщений в секунду или в минуту? стандартный экспортер для прометея не показывает таких данных
Нет (есть в планах), можно просто смотреть на count в целевой таблице или на то как передвигается оффсет в consumer group в кафке
тут у меня проблема как раз. у меня данные в протобафе, клик сожрал 16 ядер. я смотрю в табличку, и у меня около 40млн в минуту сообщений. при этом через определенные промежутки времени это кол-во падает до 20-25, и потом возвращается. данные в кафку поступают без перерывов 1 потоком. я думал если я поставлю експортеры, то увижу как клик не успевает собирать данные из кафки.
Мониторьте consumergroup в кафке
Обсуждают сегодня