184 похожих чатов

Подскажите, пожалуйста, какой-нибудь исчерпывающий материал по тому как правильно выбирать

индексы по фильтру Блума при создании таблиц? и как лучше составлять в них выражения.

7 ответов

16 просмотров

https://altinity.com/blog/clickhouse-black-magic-skipping-indices https://altinity.com/blog/skipping-indices-part-2-bloom-filters

Юрий-Шахов Автор вопроса
Denny [Altinity]
https://altinity.com/blog/clickhouse-black-magic-s...

Спасибо за ссылку! Есть, однако, один момент, который не освещен. В случае фильтра Блума, возможно ли использовать в описании индекса не просто указание на поле таблицы со строковым типом, а функцию, например, lowerUTF8(s). В моей таблице записанные данные о товарах на сайте. Названия товаров описаны прописными буквами. Таблица создана для дашборда в котором наши сотрудники используют текстовый фильтр по поиску товара. Набирают они, как правило, первые 3-4 символа строчными буквами. Заметил, что запросы к таблице с индексом в котором прописана функция lowerUTF8(s), при использовании в блоке WHERE той же функции lowerUTF8(s) like '%***%' равно работает в десять раз медленнее чем без функции. Как же быть? 1. Имеет смысл ли использовать функции в индексе? Если да, то какие? 2. Как правильно тогда составлять секцию WHERE? 3. Надо ли специально добавлять секцию PREWHERE? Заранее спасибо за ответ, если знаете.

Юрий Шахов
Спасибо за ссылку! Есть, однако, один момент, кото...

1. Да, если запрос использует функцию 2. Такой же expression как в индексе или primary key. 3. PREWHERE для фильтрации по малому количеству колонок при чтении большого количества колонок если фильтр с низким selectivity

Юрий-Шахов Автор вопроса
Юрий Шахов
selectivity - это какой-то параметр чего-то ?

это понятие обозначающие насколько конкретное условие хорошо или плохо фильтрует записи.

Юрий Шахов
selectivity - это какой-то параметр чего-то ?

если фильтр оставляет 1 строку из 10000 selectivity=1/10000 (низкий) если фильтр оставляет 9999 строку из 10000 selectivity=9999/10000 (высокий)

Похожие вопросы

Обсуждают сегодня

@MrMiscipitlick А можешь макрос написать, который будет вычислять смещение относительно переданных меток? Просто .label1-.label2, и вернуть значение.
КТ315
35
Подобного рода ;Следующие три строки это директивы ассемблера, ;которые можно не задавать, т.к.работаем в Visual Studio. ;Символ ";" - это начало однострочного комментария ...
Егор Анелькин
3
я не магистр хаскеля, но разве не может лейзи тип конвертнуться в не-лейзи запросив вычисление содержимого прям при инициализации?
deadgnom32 λ madao
100
А еще в перле можно уже @arr1 + @arr2?
Sergei Zhmylove
53
Привет всем. появился вопрос. Разрабатываю сайт, в данный момент он запущен. Хостинг beget. Добавляю на сайт яндекс метрику с помощью полей client-settings (взято отсюда http...
Andrew
2
открыть папку в проводнике: 1 - ShellExecute 2 - ExecuteProcess 3 - OpenDocument что лучше выбрать?
Alexey Kulakov
12
еще вопрос, допустим мы создадим char массив из 10 элементов и присвоим ему через сканф 10 символов. и выведем все символы. Хотел спросить последний элемент /0 будет включать...
Anthem
10
Подскажите, где смотреть результат выполнения программы? Код: ;.686 ;Система команд процессора 686 ;.MODEL FLAT,stdcall ;Модель памяти плоская, станда...
Егор Анелькин
5
Только сейчас дошли руки до Orange pi 5. Это нормально что на нем YOLOv5s выдает 1 кадр раз в 2-3 секунды на CPU? Это без оптимизаций и прочих настроек, просто голый запуск че...
Denis
10
Где в Астане можно купить мясо для шашлыков?
Dancing Іңұқәһүғө
21
Карта сайта