пятницы по воскресенье понемногу некоторые ноды в кластере ELK (11 нод) заполнились, и где-то в этот период перестали нормально заполняться три индекса, документы которых вычитываются логстешом из одной кафки, но по тегам делятся на 3 индекса.
Переполнение разрулили, но теперь вычитка из этой кафки идёт очень медленно, как будто на стороне elasticsearch идёт какое-то back pressure. Кафка не перегружена, лостеш рестартовали с разными параметрами, всё равно скорость замедлилась просто катастрофически. Как хоть это начать копать можно? Кластер зелёный.
Логстеш пишет в alias-ы, на каждом индексе политика, и всё это не менялось. Флажок read-only сбрасывали
Обсуждают сегодня