remote_write?
В логах:
level=info ts=2020-10-05T13:30:54.428Z caller=main.go:827 msg="Completed loading of configuration file" filename=/etc/prometheus/config_out/prometheus.env.yaml
ts=2020-10-05T13:30:56.077Z caller=dedupe.go:112 component=remote level=info remote_name=e74eee url=https://vm/api/v1/write msg="Done replaying WAL" duration=5.303084477s
level=info ts=2020-10-05T16:30:41.164Z caller=compact.go:495 component=tsdb msg="write block" mint=1601904638047 maxt=1601906400000 ulid=01EKWSKHJ3DPA48QA9SEQ6MD6W duration=2.505686759s
level=info ts=2020-10-05T16:30:41.454Z caller=head.go:662 component=tsdb msg="Head GC completed" duration=55.93531ms
level=info ts=2020-10-05T16:30:42.565Z caller=head.go:734 component=tsdb msg="WAL checkpoint complete" first=0 last=1 duration=1.111788137s
level=info ts=2020-10-05T17:00:06.252Z caller=compact.go:495 component=tsdb msg="write block" mint=1601906400000 maxt=1601913600000 ulid=01EKWV9CS8MF8G0DARXGH940VF duration=3.011920743s
level=info ts=2020-10-05T17:00:06.746Z caller=head.go:662 component=tsdb msg="Head GC completed" duration=73.226874ms
В конфиге:
remote_write:
- url: https://vm/api/v1/write
remote_timeout: 30s
basic_auth:
username: admin
password: |
some_password
Изнутри контейнера с промом видно и сервер с VM и тот факт, что в проме присутствуют метрики, они собираются.
ну остается только запустить tcpdump и посмотреть есть ли вообще исходящий трафик на vm на каком порту vm слушает? в url явно порт пропущен
в приведенных логах нет инфы про remote write. Для дебага на стороне прома посмотрите его собственные метрики с префиксом “prometheus_remote_.*” - там должна быть информация о попытках отправить, очереди, ошибках и т.д. Со стороны VM настройте мониторинг - https://github.com/VictoriaMetrics/VictoriaMetrics#monitoring
Обсуждают сегодня