В документации про insert_deduplicate ничего не было. Это конфиг на

Question

В документации про insert_deduplicate ничего не было. Это конфиг на

всё семейство ReplicatedMergeTree или для всго MergeTree? И если я иду вообще в неправильном направлении, может надо архитектуру поменять?

Таблица такой структуры.
Ключ состоит из трех колонок(timestamp(minutely), int, int) и плюс ещё где-то 20 колонок int и decimal, которые надо суммировать. Репликацию использую в качестве бекапа, все инсерты на один хост идут. Инсерты раз в минуту большими порциями(3-5 млн строк)

#backend #clickhouse #database #devops #programming #russian

0

13.03.2019

2 ответов

15 просмотров

Denny [Altinity]

>Инсерты раз в минуту большими порциями(3-5 млн строк) а что такое инсерт? insert into values () () () () ()миллион раз -- это пачка vs insert into values (); insert into values (); ... миллион раз -- это миллион пачек insert into values ();

0

13.03.2019

Denny [Altinity] · Accepted Answer

в реальной жизни пачка из 1000тыс строк естественным образом повторится не может (вероятность 0%) дедупликация -- любые репликатид, в зукипере хешсумма последних 100 бклоков , хранится неделю. Все это настараивается и выключается. но еще раз "в реальной жизни пачка из 1000тыс строк естественным образом повторится не может (вероятность 0%)"

184 похожих чатов

В документации про insert_deduplicate ничего не было. Это конфиг на

2 ответов

Похожие вопросы