Вопрос по skipping index прикрутили Set(20) на одну из колонок таблицы,

Question

Вопрос по skipping index прикрутили Set(20) на одну из колонок таблицы,

теперь запросы с фильтрацией по этой колонке занимают 10 секунд вместо 30, вроде всё хорошо.
но обратил внимание, что из этих 10 секунд 6 тратится на то, чтобы план построить (столько времени занимает, если вызвать этот же запрос с explain indexes=1)
для индекса: secondary_indices_compressed_bytes = 180 килобайт
secondary_indices_marks_bytes = 116 килобайт
как бы посмотреть, во что движок упирается при скане этих килобайт, что тратит 6 секунд на это?

#backend #clickhouse #database #devops #programming #russian

0

04.10.2022

8 ответов

20 просмотров

ivan Автор вопроса

Dmitry [Altinity] Titov
se(20) дорогой индекс

а по каким-то параметрам можно определять дороговизну индекса, кроме того, что по итогу он медленно работает? я вот понадеялся на итоговый размер индекса и меток

0

04.10.2022

Dmitry [Altinity] Titov

ivan
а по каким-то параметрам можно определять дорогови...

Ну размер индекса хороший показатель

0

04.10.2022

ivan Автор вопроса

Dmitry [Altinity] Titov
Ну размер индекса хороший показатель

у меня сейчас 180 килобайт на 7 гигабайтную таблицу а величина N сильно влияет на перформанс? допустим, если в грануле 5 уникальных значений, Set 10 и Set 20 будут одинаково работать?

0

04.10.2022

Dmitry [Altinity] Titov

ivan
у меня сейчас 180 килобайт на 7 гигабайтную таблиц...

> 180 килобайт Ну это фигня, сомнительно даже Вы материализацию индекса сделали кстати?

0

04.10.2022

ivan Автор вопроса

Dmitry [Altinity] Titov
> 180 килобайт Ну это фигня, сомнительно даже Вы...

наверно, это наш data инженер делал вчера, но вообще эту строчку в пулл реквесте я видел ) вообще explain indexes = 1 выдает, что индекс успешно используется (большиство гранул скипается), но проблема в том, что сама генерация этого плана занимает 6 секунд

0

04.10.2022

Dmitry [Altinity] Titov

ivan
наверно, это наш data инженер делал вчера, но вооб...

можете выполнить запрос с set send_logs_level='trace';

0

04.10.2022

ivan Автор вопроса

Dmitry [Altinity] Titov
можете выполнить запрос с set send_logs_level='tra...

https://pastila.nl/?0182265a/38d12cf77c9efc89af22ad185952b538

0

04.10.2022