сообщениями:
msg="Remote storage queue full, discarding sample. Multiple subsequent messages of this kind may be suppressed."
но при этом метрики отправляются. как можно посмотреть эту очередь и понять причины её переполнения?
Bump
Cмотрели https://victoriametrics.github.io/Single-server-VictoriaMetrics.html#prometheus-setup ? Метрики отвечающие за remote_write экспортятся с префиксом prometheus_remote_storage. Посмотрите еще детали здесь https://github.com/prometheus/prometheus/issues/5803 Со стороны VM настройте мониторинг и удостоверьтесь что достаточно ресурсов для процессинга запросов от прома https://victoriametrics.github.io/Single-server-VictoriaMetrics.html#monitoring
спасибо, похоже на It is recommended upgrading Prometheus to v2.12.0 or newer, since previous versions may have issues with remote_write.
Обсуждают сегодня