и Б.
У топика А — 12 партишенов и фактор репликации 3.
У топика Б — 4 партишена и такой же фактор репликации.
Смотрю непосредственно на файлы партишенов
/var/log/kafka/A-0 -- 2,0G /var/log/kafka/A-0
/var/log/kafka/A-1 -- 2,1G /var/log/kafka/A-1
/var/log/kafka/A-10 -- 2,5G /var/log/kafka/A-10
/var/log/kafka/A-11 -- 2,3G /var/log/kafka/A-11
/var/log/kafka/A-2 -- 1,8G /var/log/kafka/A-2
/var/log/kafka/A-3 -- 2,1G /var/log/kafka/A-3
/var/log/kafka/A-4 -- 1,5G /var/log/kafka/A-4
/var/log/kafka/A-5 -- 2,6G /var/log/kafka/A-5
/var/log/kafka/A-6 -- 2,2G /var/log/kafka/A-6
/var/log/kafka/A-7 -- 2,1G /var/log/kafka/A-7
/var/log/kafka/A-8 -- 2,6G /var/log/kafka/A-8
/var/log/kafka/A-9 -- 2,5G /var/log/kafka/A-9
Вопрос: почему даже при указании Кафке на то, что размер партишена должен быть 1 Gb, после чего нужно производить ротацию с удалением, файлы логов занимают больше 2Gb?
Мне кажется тут надо тюнить segment.bytes или segment.ms , у меня недавно была аналогичная проблема и это помогло
То есть если я хочу, чтобы один партишен занимал НЕ БОЛЕЕ 1 Gb, то устанавливать segment.bytes в 1073741824?
Обсуждают сегодня