Кто-Нибудь сталкивался с такими ошибками Code: 49, e.displayText() = DB::Exception:

Question

Кто-Нибудь сталкивался с такими ошибками Code: 49, e.displayText() = DB::Exception:

Part 202103_8469_8537_12 intersects previous part 202103_8434_8470_3 (state Committed). It is a bug. (version 20.8.12.2 (official build)) на постоянной основе? Каждый день появляются такие ошибки *на одной и той же таблице* в system.replication_queue. Иногда лечатся через optimize table <> final , иногда не помогает, приходится делать detach/attach партиции(помогает 100%).
Детали: есть Replicated таблица, 8 реплик(без шардов), каждое утро на 4 репликах запускается крон который выполняет несколько insert в эту таблицу, данные вставляются на каждом хосте в несколько потоков, данные разные но партиции вставляемых данных пересекаются.
После того как кроны отрабатывают - видим 10-20 ошибок в replication_queue на каждом хосте(даже на тех на которых не было вставки).
На хостах еще куча других таблиц replicated, с шардами, с зеркалами, но там запись идет всегда в одну ноду... неужели проблема в параллельной записи в разные зеркала? Подскажите куда можно копнуть?

#backend #clickhouse #database #devops #programming #russian

0

23.03.2021

3 ответов

13 просмотров

Vladimir Rudev Автор вопроса

Denny [Altinity]
надо лог КХ полный с нескольких реплик (в режиме t...

ок, сейчас будем делать. Спасибо. >_12 _3 -- это была куча мержей уже (12 уровень) Да, партиция - месяц, вставок параллельно идет много в одну партицию и не все большие, отсюда очень много мержей появляется

0

23.03.2021

Denny [Altinity]

Vladimir Rudev
ок, сейчас будем делать. Спасибо. >_12 _3 -- это ...

я про то что в чате это не разобрать, тут надо грепать логи часов 6

0

23.03.2021

Denny [Altinity] · Accepted Answer

Denny [Altinity]

надо лог КХ полный с нескольких реплик (в режиме trace) , чтобы понять всю историю партов, делайте тикет в гитхаб заливайте log файлы куда-то _12 _3 -- это была куча мержей уже (12 уровень)

0

23.03.2021

184 похожих чатов

Кто-Нибудь сталкивался с такими ошибками Code: 49, e.displayText() = DB::Exception:

3 ответов

Похожие вопросы