184 похожих чатов

Добрый день, подскажите как можно ускорить забор кликхаусом из кафки?

Есть стандартная схема с таблице на движке kafka, MV и результирующей таблицей. Проблема что записи в результирующую таблицу поступают с задержкой минимум 2-5 минут, в пиках когда рейт записи в кафку повышается задержка может до 20 минут доходить. Пробовал увеличивать kafka_max_block_size, докидывать в топик партиций и поднимать количество консумеров, но особого эффекта это не дало. Такое ощущение что есть еще какое то фиксированное ограничение :( По мониторингу ресурсы на сервере есть, нельзя сказать что все упирается в память или ЦПУ. Куда еще можно покопать?

1 ответов

10 просмотров

для начала сказать 1. какая у вас версия КХ. 2. какой рейт в строках и в байтах. 3. какая летенси от КХ до брокера (время пинга)

Похожие вопросы

Обсуждают сегодня

Мужики и девушки, привет) в Вelphi xe7 в настройках во вкладке "Editor Options" далее " Color" есть список: "Elements", открыв который мы можем настраивать отображение разных...
Kraszx
14
Добрый вечер. Есть вопрос, а может и предложение. Был у меня диалог в другой группе о делфи и я задался вопросом: "А нельзя ли в делфи цвет //коментария и {комментария} сде...
Kraszx
24
Я вот подумал. SSE выполняет операции максимум с 64-битной точностью. А FPU - всегда с 80-битной. Разве не должно быть FPU точнее тогда?
The Bird of Hermes
13
Мдя, прикол, боевая сборка запускается (именно под отладчиком) после F9 примерно полторы минуты (97 секунд если быть точным). Начал копать - проблема детектится сразу - зависа...
Александр (Rouse_) Багель
38
как быть с принтером? такой подход прокатит?
zamtmn
12
Всем привет! Подскажи, пожалуйста, как передать в TComboBox сразу значение и id записи. На Delphi я делал так: ComboBox1.Items.AddObject('Какое-то значение', Pointer(id запис...
Евгений
13
Здравствуйте, вопрос по структурам данных. Были у вас случаи, когда пришлось писать деревья или двунаправленные списки?
/ /
50
Я не понимаю, это троллинг или что? Швабрика поддерживают, который буквально пишет на ассемблере взаимодействия с винапи. Я это ещё написал загрузчик и хоть что-то изучаю в о...
Shadow Akira
6
А вот это что за конструкция? Вернее, она тут нафига?
Serjone
10
Товарищи, кто работа с iphelper? Или может я в самой логике ошибки фигачу, не пойму.... var ifTable : PMIB_IFTABLE; size, corSize: DWORD; Buffer ...
Warfarellen
4
Карта сайта