Добрый день, подскажите плиз - есть ли какой-то смысл объединять

Question

Добрый день, подскажите плиз - есть ли какой-то смысл объединять

несколько разных по топикам консьюмеров в одну группу, или же не париться и делать каждому горизонтально-поскейленому консьюмеру свою отдельную? Столько доков уже перерыл, не увидел практической разницы

#kafka #russian #software

0

11.10.2022

5 ответов

22 просмотра

Aleksandr

Вячеслав
Если объедините - они будут друг друга тормозить п...

Вот интересно как же вы сделали такой вывод, без понимания как организована работа консьюмеров с данными

0

11.10.2022

Василий Калугин

Offset commit failed on partition <> at offset 15569: The coordinator is not aware of this member. Почитайте про похожую ситуацию (когда один ConsumerGroup читает из разных топиков) вот здесь: https://issues.apache.org/jira/browse/KAFKA-4246 Вряд ли это на стороне клиента, все же склоняюсь к тому, что проблема (выше указанная) имела место в Kafka версий - 1. This bug still exists in Kafka 2.4.0. 2. This bugs still exists on Kafka 2.7.X

0

11.10.2022

Вячеслав

Aleksandr
Вот интересно как же вы сделали такой вывод, без п...

На личном опыте. Но если хотите, можете ткнуть меня в какой-нибудь пруф своей версии, попросвещаюсь.

0

11.10.2022

Aleksandr

Вячеслав
На личном опыте. Но если хотите, можете ткнуть мен...

Наверное не стоит :) у вас там видимо триллиарды сообщений и тысячи консьюмеров :)

0

11.10.2022