Если используется вставка в Distributed таблицу, то надо сначала ALTER-ить

Question

Если используется вставка в Distributed таблицу, то надо сначала ALTER-ить

локальные таблицы, а только потом Distributed.

Почему: дело в том, что после вставки в Distributed таблицу, заполняются все столбцы, которые в ней есть, включая свежедобавленный. Затем этот блок данных отправляется дальше для вставки в локальные таблицы, где нового столбца ещё нет. Эта вставка не проходит, и Distributed таблица пытается её повторять.

При этих повторах должна срабатывать дедубликация данных. Почему не сработала? Есть разные варианты - возможно, используются столбцы с rand() или now() значением по-умолчанию или что-то в этом роде. Также может быть некоторые идеи знает @vludv

#backend #clickhouse #database #devops #programming #russian

0

16.01.2018

4 ответов

4 просмотра

Alexey Milovidov Автор вопроса

Хотя вы вставляете в локальные таблицы напрямую, значит тут другое.

0

16.01.2018

Vitaliy Lyudvichenko

@garikanet Я могу объяснить появление дублей, если у вас в логе помимо ошибок "There is no column with name D" еще будут "Unexpected error while adding block". У вас есть такие? Да, и т.к. вы вставляете напрямую, Distributed таблица тут ни при чем.

0

17.01.2018

Andrey

Подскажите, пожалуйста, можно ли менять число повторов на вставку Distributed таблицей?

0

22.05.2019

Igor Strykhar · Accepted Answer

Igor Strykhar

Спасибо, да слона мы и не заметили что-то ) Еще вопрос, а метрика перешла на 1.1.54327 в проде - хотим обновлять кластер - можно ? ))

0

17.01.2018

184 похожих чатов

Если используется вставка в Distributed таблицу, то надо сначала ALTER-ить

4 ответов

Похожие вопросы