с acks=all работает быстро, а у новой с продюсерами задержка в 20 секунд?
конфиги кафки/топиков на старой кафке и новой сравнивали?
у новой 13 партиций разве что, и 3 реплики а не 2 раньше у топиков был rf2, 1 партиция
а нагрузочное тестирование пробовали на старую/новую кафку. Чтобы исключить что дело в продьюсере? kafka-producer-perf-test.sh
в том и дело, выше уже писал, я тестил, проблема в продюсере, была, когда поставили acks=1 задержка с 20 секунд стала 10 мс
речь не про ваш продьюсер. а про встроенный инструмент кафки. Или вы именно про него и говорите когда сравниваете запись в старую кафку и в новую при аналогичных параметрах продьюсера и аналогичных параметрах кафки/топика?
у меня топики десятки тб, с 1 партицией я диск просто забью моментом
Обсуждают сегодня