А ошибки с 'offset -140' в консьюмерах кафки никто не

Question

А ошибки с 'offset -140' в консьюмерах кафки никто не

встречал? Не можем разобраться, помогает сброс оффсета и перезапуск консьюмера, но бывает, что эту операцию нужно повторить несколько раз до "выздоровления". Перед перезапуском стопаем все консьюмеры группы, где сбрасываем оффсет.

#programming #russian #sentry

0

12.06.2024

7 ответов

30 просмотров

Артём Автор вопроса

Dmitry Rusanov
Добрый день. Мне помогло увеличение количество па...

а консьюмеры в ошибку не падают или тоже синхронно с ресетом оффсетов перезапускаются?

0

5 месяцев назад

Dmitry Rusanov

Артём
а консьюмеры в ошибку не падают или тоже синхронно...

Вроде нет. Или быстро подхватываются. Он же делает ресет только тех топиков, у кого проблемы с офсетом

0

5 месяцев назад

Serg

Dmitry Rusanov
Добрый день. Мне помогло увеличение количество па...

Количество консьюмеров увеличили?

0

5 месяцев назад

Dmitry Rusanov

Serg
Количество консьюмеров увеличили?

Нет, больше ничего не трогал

0

5 месяцев назад

Serg

Dmitry Rusanov
Нет, больше ничего не трогал

Тогда смысла не много, можно было просто ретеншн поднять. Результат тот же был бы

0

5 месяцев назад

Dmitry Rusanov

Serg
Тогда смысла не много, можно было просто ретеншн п...

Спасибо за совет, попробую, когда новые нестабильности начнутся. Единственное, что потребуются дополнительные ресурсы. Сейчас даже трогать страшно, смотрю на плавные графики даже без дропов с замиранием сердца 😄

0

5 месяцев назад

Dmitry Rusanov · Accepted Answer

Добрый день. Мне помогло увеличение количество партиций кафки до 10 плюс по кронджобе выполняю ./bin/kafka-consumer-groups.sh --bootstrap-server <kafka-service>:9092 --all-groups --all-topics --reset-offsets --to-latest --execute Возможно, это не круто с точки зрения экспертов по кафке и сентри, но теперь хоть какая-то стабильность

169 похожих чатов

А ошибки с 'offset -140' в консьюмерах кафки никто не

7 ответов

Похожие вопросы