Vladimir Berunenko

Ок, а в чем вопрос? Обычно rack-aware в Кафке настраивается так: в каждой локации у брокера в конфигах прописывается свой rack, уникальное строковое значение. Дальше при созда...

Крайне интересная штука. Есть ощущение, что именно брокер 5 пытается в того, кто по его мнению лидер (6) закоммитить последний оффсет по несуществующей у него партиции. Отсюда...

Итого: кластер из трех узлов, данных в нем пока что нет и менялись брокеры? Рекомендую остановить кластер, удалить все данные из папки хранения данных (логов) кафки и папку ve...

Угу! Вроде как istio хотят на каком-то уровне поддержать Кафку, но мы же помним про неумение Кафки в автоскейлинг от слова "вообще"?)

Группа все равно есть. Я правильно понимаю, что через какое-то время теряется координатор группы? И какая версия Кафки? Такое пару раз видел на 1.1

Это в облаках Амазона или на своих ресурсах делать хочется?

--describe при этом показывал одинаковое число Replicas у каждой из партиций? Я бы не сказал, что skew после перераспределения партиций является нормой.

А откуда же партиция на брокере 5 у данного топика? А какой брокер не в ISR? Может, все просто: кто-то в конфиге id брокера поменял и рестартнул его?

То есть вопрос в том, что будет, если рухнуло на записи в сокет? Это на уровне ОС детектится.

Хорошая мина :) А метаданные не забыли на ССД запулить? Всякие консьюмер-оффсеты?)

Попробуй из контейнера коннекта телнет на бутстрапы. Он сможет или рефьюзнется?

А если сказать --describe на topic-0 список реплик и isr совпадают и лидер находится среди списков реплик?

Replicas: 6, 7, 8; ISR 7, 8? И при этом фрагмент лога относится к брокеру, отличному от 5, 6, 7, 8?

А, то есть describe выдавал странное в момент перераспределения? Это да, вполне возможно.

Как прописаны listeners на брокерах и где находится консьюмер?

А по мнению ZK, какие брокеры есть в кластере? Вернее, есть ли в кластере брокер 6?

Такое ощущение, что тут завязан HW. А какой на "интегрейшене" конфиг кластера?

Так а сам connect в том же кубере, или снаружи?

А лаги по консьюмер-группе что говорят?

Получилось ли пролечить кластер?