Немного запутался в индексах и партициях, помогите пжл понять. Пусть

Question

Немного запутался в индексах и партициях, помогите пжл понять. Пусть

как документации есть таблица с таким определением:

ENGINE MergeTree() PARTITION BY toYYYYMM(EventDate) ORDER BY (CounterID, EventDate)

EventDate - дата и время
CounterID - числа с диапазоном значений из 0 - 10КК

Запросы будут с критерием выборки как по паре (CounterID, EventDate) так и только по EventDate.

Правильно ли иметь ключ сортировки именно в таком порядке столбцов? Для запросов только по EventDate лучше иметь обратный порядок, т.е. (EventDate, CounterID)? Причём он подходит и для запросов по паре.

Правильно?

#backend #clickhouse #database #devops #programming #russian

0

28.03.2022

8 ответов

24 просмотра

Dmitrii Apanasevich Автор вопроса

Константин
Я бы сказал, если вы не будете потом пересортировы...

С каким порядком будет работать идеально, с таким: (EventDate, CounterID)? Не очень понимаю, что значит пересортировывать.

0

28.03.2022

Константин

Dmitrii Apanasevich
С каким порядком будет работать идеально, с таким:...

Ну например вы сделали запрос SELECT groupArray(CounterID) FROM table ORDER BY EventDate , то считайте пересортировали. Ну то есть вы в массив получили данные отсортированные по времени

0

28.03.2022

Dmitrii Apanasevich Автор вопроса

Константин
Ну например вы сделали запрос SELECT groupArray(C...

Скорее всего, будут и такие запросы.

0

28.03.2022

In Fis

Если Вы планируете всегда в запросах использовать EventDate и иногда CounterID, то делайте ORDER BY (EventDate, CounterID). В противном случае у Вас будет фулскан партиции.

0

28.03.2022

Dmitrii Apanasevich Автор вопроса

In Fis
Если Вы планируете всегда в запросах использовать ...

именно так: ограничения по дате будут всегда

0

28.03.2022

Sergey Churin

можно еще попробовать так: ORDER BY (toDate(EventDate), CounterID, EventDate)

0

28.03.2022

Ilya Golshtein

Вы, кажется, не учитываете, что в ClickHouse индекс задает физическую упорядоченность данных в таблице. Поэтому он один. Что касается CounterID, это немного тревожно, потому что похоже на OLTP.

0

28.03.2022

Константин · Accepted Answer

Константин

Я бы сказал, если вы не будете потом пересортировывать данные по EventDate, то ваш пример будет работать оптимально

0

28.03.2022

184 похожих чатов

Немного запутался в индексах и партициях, помогите пжл понять. Пусть

8 ответов

Похожие вопросы