Max.Poll.Interval.Ms увеличить тогда можно?

Question

pro.kafka

evergood

Max.Poll.Interval.Ms увеличить тогда можно?

#kafka #russian #software

0

13.10.2022

4 ответов

22 просмотра

evergood Автор вопроса

Denis Pavlyuchenko
ну, попробовать можно, но: 1. там по дефолту и так...

ну вот ускорить их пока не представляется возможным) и больше тоже никак, всё упирается в вызовы до загруженной базы

0

13.10.2022

Denis Pavlyuchenko

evergood
ну вот ускорить их пока не представляется возможны...

не очень понятно тогда, что ожидается от системы? Например, мы можем вставлять в БД 100 записей в секунду, а в кафку поступает 150. Тут какие параметры не крути, всё равно мы же медленно убиваем систему. Нас может что-то спасти, например , если у нас есть пики нагрузки, а потом нагрузки мало, где мы очередь протолкнем. Или если можно терять часть сообщений. Или если у нас бесконечные диски на кафке. Но, кажется, сначала, перед тем, как крутить параметры кафки, стоит понять, какой результат нужен.

0

13.10.2022

evergood Автор вопроса

Denis Pavlyuchenko
не очень понятно тогда, что ожидается от системы? ...

нет, не настолько фатально) после переезда на другую систему выгружали большое количество сообщений за один раз и столкнулись с таким поведением

0

13.10.2022

Denis Pavlyuchenko · Accepted Answer

ну, попробовать можно, но: 1. там по дефолту и так должно быть довольно большое значение 2. вряд ли это правильный фикс для прода. Возможно, надо просто делать так, чтобы консьюмер быстрее обрабатывал элемент, или больше консьюмеров в разумных пределах. хотя, скорей всего, дело не в числе консьюмеров, а в том, что они там дальше делают

52 похожих чатов

Max.Poll.Interval.Ms увеличить тогда можно?

4 ответов

Похожие вопросы