Здравствуйте, подскажите, пожалуйста: есть таблица на 10 млн строк по

Question

Здравствуйте, подскажите, пожалуйста: есть таблица на 10 млн строк по

которой нужно произвести ILIKE запрос строки в одной колонке. Как можно ускорить такой поиск?

Никогда с подобным не сталкивался. Быстрый поиск по интернету не помог, потому что глобально не знаю, что конкретно искать

Поиск производится на сервере с 16 RAM и 8 vCPU. По-любому же можно как-то распараллелить запросы, но вот как именно…

#backend #devops #pgsql #programming #russian

0

23.03.2022

8 ответов

27 просмотров

Rostislav Dugin Автор вопроса

Anatoliy Burov
За планирование распараллеливания, скорее, отвечае...

О, спасибо за подсказку о планировщике - слышал, но забыл. И за ручное тоже, если с первым не разберусь - попробую вручную

0

23.03.2022

roman Дубровин

Есть еще вариант - использовать курсор. Время выполнения будет дольше, но нагрузка меньше

0

24.03.2022

Zakhary

А планировщик по умолчанию не распараллелит запрос сам?

0

24.03.2022

Sergey Gr

Zakhary
А планировщик по умолчанию не распараллелит запрос...

Может - зависит от настроек

0

24.03.2022

Zakhary

Sergey Gr
Может - зависит от настроек

А где глянуть можно?

0

24.03.2022

Sergey Gr

Zakhary
А где глянуть можно?

grep -i parallel postgresql.conf #max_parallel_workers_per_gather = 2 # taken from max_parallel_workers #max_parallel_maintenance_workers = 2 # taken from max_parallel_workers #max_parallel_workers = 8 # maximum number of max_worker_processes that # can be used in parallel operations #parallel_leader_participation = on #enable_parallel_append = on #enable_parallel_hash = on #parallel_setup_cost = 1000.0 # same scale as above #parallel_tuple_cost = 0.1 # same scale as above #min_parallel_table_scan_size = 8MB #min_parallel_index_scan_size = 512kB

0

24.03.2022

Zakhary

Спасибо 👍

0

24.03.2022

Anatoliy Burov · Accepted Answer

Anatoliy Burov

За планирование распараллеливания, скорее, отвечает планировщик. Если вы сами хотите распараллелить, можете =) Типа select * from table where id >=1 and id < 10000 and column_name ilike 'pattern' select * from table where id >= 10000 and id < 20000 and column_name ilike 'pattern' и так далее=)

0

23.03.2022

172 похожих чатов

Здравствуйте, подскажите, пожалуйста: есть таблица на 10 млн строк по

8 ответов

Похожие вопросы