Есть таблица 200Gb с engine = ReplacingMergeTree, есть похожая таблица

Question

Есть таблица 200Gb с engine = ReplacingMergeTree, есть похожая таблица

с дополнительными полями от первоначальной и некоторые поля String в новой LowCardinality(String)
Если перегонять INSERT INTO ... SELECT то пропадает около 10-30% данных. В чем может быть загвоздка?
вариант со схлопыванием отпадает, в первоначальной был сделан OPTIMIZE TABLE ... FINAL
ClickHouse server version 19.3.6 revision 54415

#backend #clickhouse #database #devops #programming #russian

0

04.01.2020

1 ответов

14 просмотров

Artemeey Gavryushin · Accepted Answer

1) Проверить исходные данные Если primaryKey одинаковы, то попробуйте проверить число записей по ключу. Быть может все же дело в дублях. uniqExact() 2) Убедиться, что запрос выполняется без ошибок Если действительно данных в исходящей таблицу больше, то запустите перенос ещё раз и проследите за процессом в system.processes Или посмотрите данные о запросе в логе. 3) Убедиться, что оптимизация выполнилась. В таблице system.parts только одна строка по этой таблице должна иметь статус 1 В system.processes не должно быть незавершённых операций оптимизации

184 похожих чатов

Есть таблица 200Gb с engine = ReplacingMergeTree, есть похожая таблица

1 ответов

Похожие вопросы