Подскажите, пожалуйста, как верно выбрать параметр GRANULARITY для индекса? Выставил

Question

Подскажите, пожалуйста, как верно выбрать параметр GRANULARITY для индекса? Выставил

вот такие для теста.

INDEX receiption_date_index documentReceptionDate TYPE minmax GRANULARITY 3,
INDEX receiption_date_index_dd toDate(documentReceptionDate) TYPE minmax GRANULARITY 2
) ENGINE = ReplacingMergeTree(loadDate) PARTITION BY toStartOfWeek(documentReceptionDate) ORDER BY documentID SETTINGS index_granularity = 8192

Данные в таблице примерно так распределены:
За один toDate(documentReceptionDate) примерно 20-30к уникальных documentID
Для разных documentID дата documentReceptionDate может быть одинаковой, может разной. Чаще разная

#backend #clickhouse #database #devops #programming #russian

0

26.11.2020

6 ответов

13 просмотров

M Автор вопроса

Denny [Altinity]
Методом подбора/тыка

Такие параметры, вроде как дают ожидаемый результат. Если в таком запросе select count() from trafficTarificationDrKzWithPayer where toDate(documentReceptionDate) BETWEEN toDate('2020-10-13') and toDate('2020-11-25') количество Selected 3 parts by key, то в таком select count() from data_vault_business_layer.trafficTarificationDrKzWithPayer FINAL where toDate(documentReceptionDate) BETWEEN toDate('2020-09-13') and toDate('2020-11-25') количество Selected 11 parts by key. Так же я могу убедиться, что индекс работает и лишнее не читается? Или надо на что-то еще посмотреть?

0

26.11.2020

Denny [Altinity]

M
Такие параметры, вроде как дают ожидаемый результа...

это сообщения про партиции и первичный ключ. про skip индекс написано dropped marks

0

26.11.2020

M Автор вопроса

Denny [Altinity]
это сообщения про партиции и первичный ключ. про ...

Index receiption_date_index_dd has dropped 0 granules. Index receiption_date_index has dropped 0 granules. Выходит, не работает он тогда( А Если включить documentReceptionDate в ключ ORDER BY, по идее я же тогда получу ожидаемый результат, то есть чтобы не читалось лишнее?

0

26.11.2020

Denny [Altinity]

M
Такие параметры, вроде как дают ожидаемый результа...

Да и да

0

26.11.2020

【D】【J】

M
Index receiption_date_index_dd has dropped 0 granu...

да, если есть "локальность" или "коррелированность" documentReceptionDate относительно documentID. например documentID уникален и все время растет. далее тут https://clickhouse.tech/docs/ru/engines/table-engines/mergetree-family/mergetree/#primary-keys-and-indexes-in-queries

0

26.11.2020

Denny [Altinity] · Accepted Answer

Denny [Altinity]

Методом подбора/тыка

0

26.11.2020

184 похожих чатов

Подскажите, пожалуйста, как верно выбрать параметр GRANULARITY для индекса? Выставил

6 ответов

Похожие вопросы