Коллеги, добрый день! Не подскажете какие в целом есть решения применимые

Question

Коллеги, добрый день! Не подскажете какие в целом есть решения применимые

к кликхаусу для избежание дубликатов при вставке данных ? Планируется, что данные будут вставляться большими батчами и изначально без проверки на дублирование.

#backend #clickhouse #database #devops #programming #russian

0

28.07.2022

6 ответов

32 просмотра

Vaska Kasatka Автор вопроса

Константин
Движок таблицы ReplacingMergeTree, либо OPTIMIZE D...

Я читал, что движок производит мердж данных с некоторой фоновой задержкой. Т.е, как я понял, после вставки какое-то неопределенное время данные будут дублироваться. Можно ли что-то сделать, чтобы сразу же после вставки получать уникальные данные? (Автоматически пересчитываются аналитические запросы после вставок, поэтому так важна достоверность)

0

28.07.2022

Anton Mikhalev

Vaska Kasatka
Я читал, что движок производит мердж данных с неко...

https://altinity.com/blog/2020/4/14/handling-real-time-updates-in-clickhouse

0

28.07.2022

Константин

Vaska Kasatka
Я читал, что движок производит мердж данных с неко...

Использовать модификатор запроса FINAL при SELECT

0

28.07.2022