А kafka сама в том же облаке? Я слышал что

Question

pro.kafka

Anatoliy

А kafka сама в том же облаке? Я слышал что

в Яндекс облаке бывают ограничения на сеть. Кроме того, находится ли кафка в той же зоне, что и продюсер?

#kafka #russian #software

0

10.10.2023

2 ответов

16 просмотров

Dmitriy Vityuk

.
Все в одном облаке, в одной подсетке и это яндекс ...

Если яндекс, то: 1. Смотрите в мониторинге на утилизацию дисков. Если синий график (burst) упирается в 100% значит у вас тротлинг уже включается. Диск нужен пошустрее. 2. Разнесите клиента и кафку по разным вм. Лучше брокеров в кубере не запускать. На vm включите фичу "програмно ускоренная сеть". докер network=host, на bridge процентов на 30% медленее. 3. Потоков io и network хотя бы сколько ядер. Буфера сокетов так же поднять. У меня получалось 600-700МБ/с на брокер в синтетике в яндексе выжать. Дальше упирался в сеть, которая там от 6до 10гбит/с. "Как повезет". "Померяйте сеть, если мало, перезагрузите виртуалку, может попадет на более свободный хост" - так саппорт ответил на вопрос "почему от 6 до 10 и как всегда 10 сделать?"

0

10.10.2023

. · Accepted Answer

.

Все в одном облаке, в одной подсетке и это яндекс да. Канал вроде 1гигабит в секунду заявленный. Все в одной зоне

0

10.10.2023

52 похожих чатов

А kafka сама в том же облаке? Я слышал что

2 ответов

Похожие вопросы