184 похожих чатов

Привет! Мне нужно сделать таблицу, где бы хранились последние версии

строк по ID

требуется, чтобы дедубликация прошла на момент вставки чтобы от пользователя не требовалось писать group by + argMax на каждый запрос

пытаюсь использовать:
- table: engine AggregatingMergeTree (id, AggregateFunction(argMax, String, DateTime))
- materialized view, который в него вставляет с argMaxState() group by ID

для AggregatingMergeTree в доке указано, что будет коллапс строк, но в таблице есть дубликаты по ID после срабатывания MV

AggregatingMergeTree
The engine inherits from MergeTree, altering the logic for data parts merging. ClickHouse replaces all rows with the same primary key (or more accurately, with the same sorting key) with a single row (within a one data part) that stores a combination of states of aggregate functions.

верно ли, что все равно нужно писать group by + argMax даже при запросах к MV?

2 ответов

33 просмотра

в момент вставки де-дупликация делается, но она идет внутри блока и потом в фоне идет при background merge используйте SELECT ... FINAL ... чтобы финализировать дедупликацию в момент чтения сейчас это распаралелено и не так уж и медленно

Похожие вопросы

Обсуждают сегодня

а через ESC-код ?
Alexey Kulakov
29
30500 за редактор? )
Владимир
47
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
13
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
в JclConsole объявлено так: function CtrlHandler(CtrlType: DWORD): BOOL; stdcall; - где ваше объявление с stdcall? у вас на картинке нет stdcall
Karagy
8
Как передать управляющий символ в открытую через CreateProcess консоль? Собсна, есть процедура: procedure TRedirectThread.WriteData(Data: OEMString); var Written: Cardinal;...
Serjone
6
Ребят в СИ можно реализовать ООП?
Николай
33
program test; {$mode delphi} procedure proc(v: int32); overload; begin end; procedure proc(v: int64); overload; begin end; var x: uint64; begin proc(x); end. Уж не знаю...
notme
6
у вас два процесса. один посылает другому сигнал. у вас есть код обоих процессов? если всё не так - расскажите как оно на самом деле. а именно кто кому чего, есть-ли консоли,...
Karagy
6
Карта сайта