запуске 3*N консюмеров на 3 разных машинах? Верно понимаю, что первые N запущенных будут читать, а все остальные ждать, и если не дай бох какие консюмеры упадут, то при ребалансе начнут читать случайно выбранные из ожидающих(или те кто первые встали в ожидание?). И в целом вполне реален кейс что весь цикл даже после сбоя 1 машины все консюмеры могут быть на 1 машине и смысла в этом нема ?
Есть ли смысл вообще знать, кто читает партиции, если задача выполнена и offset закоммичен?
зочем тратить х3 ресурсов, просто сейчас переношу из докера в кубы и вот не понимаю зочем мне стейтфул сет тут
Я бы добавил, наоборот, партиций и настроил автоскейлинг
Обсуждают сегодня