и стоит опция retention 30d, Сегодня пришел алерт что скоро место кончится:
has only 17.59% available space lef
А через час prom запустил garbage collect и все метрики снес:
level=info ts=2020-02-06T13:00:04.316Z caller=head.go:586 component=tsdb msg="head GC completed" duration=71.736913ms
level=info ts=2020-02-06T13:00:05.758Z caller=head.go:656 component=tsdb msg="WAL checkpoint complete" first=2 last=3 duration=1.441751668s
Как то можно настроить, чтобы они хранились 30 дней без таких вот очисток?
В смысле "снёс"?
Обсуждают сегодня