тригеров для алертов, в которых были Problem expression и Recovery expression с некоторым зазором.
Чтобы алерт постоянно не "моргал" около порогового значения.
Например самое простое правило
Problem: {statsd:bad_lines_seen[total].last()}>100
Recovery: {statsd:bad_lines_seen[total].last()}=0
Подскажите, пожалуйста, можно ли реализовать что-то подобное в проме\вике?
вы хотите гистерезис. есть несоклько подходов к тому как его делать на прометее но все так себе. 1. делать два уровня алертов. на первый работает на само выражение второе на выражение с учетом того что первый горит 2. забить на гистерезис 3. с особым цинизмом забить на гистерезис. третий способ рекомендуют авторы самого прома.
Вы имеете в виду, что это антипаттерн в мониторинге? Или просто инструмент не подходящий? )
Инструмент неподходящий.
А можете что-то предложить из актуального?
Только переделать пороги проверок так, чтобы не флапали.
-_-
Обсуждают сегодня