Привет всем. Вопрос по Alertmanager. Запустил его в кластере, 2

Question

Привет всем. Вопрос по Alertmanager. Запустил его в кластере, 2

инстанса. В метриках вижу, что один занял позицию №0, другой №1, т.е. они друг-друга нашли и подружились вроде.
Но почему-то оба отправили алерт, т.е. я получил его в слаке два раза :(
Документация пока не попалась, как такого избежать? или как они вообще решают между собой, кто будет слать алерты?

#metrics #programming #russian

0

02.02.2021

5 ответов

32 просмотра

Alexey Zakharov

В алертменеджере ведь нет кворума и если он остаётся один и ему приходит алерт, он его просто отправляет?

0

02.02.2021

Aleksey Shirokikh

там нет консенсуса

0

02.02.2021

Andrey Panov Автор вопроса

Судя по тому что я прочитал, в Alertmanager не нужен кворум. Они все должны слать, но каждый следующий с задержкой... вот что-то с этой задержкой проблема.

0

02.02.2021

Andrey Panov Автор вопроса

отправляет тот, который получил алерт. Если получили оба, то второй как только получит сообщение от первого, что тот уже отправил, то не будет отправлять. Если не получит, то сам отправит.

0

02.02.2021

Alexander · Accepted Answer

Во-первых, кластер из 2х бесполезен: там используется консенсус с кворумом 50%+1, и потому для любого N отказоустойчивость кластера из 2N узлоа эквивалентна кластеру из 2N-1 узлов. По поводу двойных алертов: удостоверься, что у тебя окно группировки алертов достаточно широкое, чтобы в него пролетали оба алерта, а также, что у тебя правильно выставлен ключ группировки. Документация тут https://www.prometheus.io/docs/alerting/latest/alertmanager/

171 похожих чатов

Привет всем. Вопрос по Alertmanager. Запустил его в кластере, 2

5 ответов

Похожие вопросы