фаилов много, строк тоже не мало, вставляется все в параллель что создает просто немерянное количество партов. Они конечно в конце концов мерджатся, со временем, но репликация начинает гонять парты между репликами конечно же намного раньше чем все смерджилось, что создает некоторые проблемы. Теперь собственно вопрос, можно ли как либо или ускорить мердж партов, или отложить репликацию пока хотя бы какая то часть не смерджилась?
Можно увеличить кол-во процессов для фоновых мерджей. Но как правило такое приводит к повышению нагрузки на сервер и сильной деградации КХ. Обычно помогает переделка схемы таблицы, чтобы партиций было как можно меньше
в чем проблема, можно вставлять файл целиком, будут парты по миллиону строк. Вы наверное перемудрили с шардированием или партиционированием, и у вас инсерты разбиваются на много партов.
Обсуждают сегодня