184 похожих чатов

Всем привет вопрос по репликациям. Вставляю дату из паркет фаилов,

фаилов много, строк тоже не мало, вставляется все в параллель что создает просто немерянное количество партов. Они конечно в конце концов мерджатся, со временем, но репликация начинает гонять парты между репликами конечно же намного раньше чем все смерджилось, что создает некоторые проблемы. Теперь собственно вопрос, можно ли как либо или ускорить мердж партов, или отложить репликацию пока хотя бы какая то часть не смерджилась?

2 ответов

13 просмотров

Можно увеличить кол-во процессов для фоновых мерджей. Но как правило такое приводит к повышению нагрузки на сервер и сильной деградации КХ. Обычно помогает переделка схемы таблицы, чтобы партиций было как можно меньше

в чем проблема, можно вставлять файл целиком, будут парты по миллиону строк. Вы наверное перемудрили с шардированием или партиционированием, и у вас инсерты разбиваются на много партов.

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта