Всем доброго времени суток. Есть агрегирующий запрос, соединяющий три таблицы. Postgresql

Question

Всем доброго времени суток. Есть агрегирующий запрос, соединяющий три таблицы. Postgresql

15.5 (16 CPU / 32 RAM / SSD)

Странное поведение вот в чем. Если выставлять параметры:
random_page_costs
effective_io_concurrency
как для SSD дисков (1.1 и 200 соответственно), то сервер не запускает параллельные "воркеры",
А если эти же параметры настроить как для HDD (4 и 2 соответственно), то параллельные воркеры запускаются.
И разница в запросе 3 минуты при настройках как для SSD или 40 секунд при настройке, как для HDD.

Это нормальное поведение сервера ?
Размер базы порядка 80 GB.

#backend #devops #pgsql #programming #russian

0

22.11.2023

19 ответов

29 просмотров

Марсель Габдрахманов Автор вопроса

Ilya Anfimov
Ну, что ты как первый раз -- на случай скорости у ...

погнали: план при настройках как SSD DDL план настройки HDD запрос

0

6 месяцев назад

Ilya Anfimov

Марсель Габдрахманов
погнали: план при настройках как SSD DDL план нас...

Мда. Детально не прочитал, и, видимо, только ночью руки дойдут — но по первым прикидкам вроде непараллелящихся сегментов не появилось в плане "под ССД". А если parallel_tuple_cost и parallel_setup_cost в 0 поставить – то explain не начнёт воркеров предлагать?

0

6 месяцев назад

Марсель Габдрахманов Автор вопроса

Ilya Anfimov
Мда. Детально не прочитал, и, видимо, только ночью...

заметил, explain почему то "Режет" параллельные воркеры.

0

6 месяцев назад

Марсель Габдрахманов Автор вопроса

Ilya Anfimov
Мда. Детально не прочитал, и, видимо, только ночью...

выбирает их

0

6 месяцев назад

Ilya Anfimov

Марсель Габдрахманов
заметил, explain почему то "Режет" параллельные во...

Непонял. Строки Gather Merge, Parallel Join и Parallel seq scan должны остаться.

0

6 месяцев назад

Ilya Anfimov

Марсель Габдрахманов
выбирает их

Непонял. Кост 90 мильонов — это скорее "хдд" настройки, тут он и так выбирался.

0

6 месяцев назад

Yaroslav Schekin

Марсель Габдрахманов
погнали: план при настройках как SSD DDL план нас...

Вы бы лучше показывали EXPLAIN (ANALYZE, VERBOSE, BUFFERS, SETTINGS)... кстати, ни одной поддерживаемой версии PostgreSQL, где это не работает, больше нет. И да, зачем Вы показываете сгенерированный неведомо чем DDL, а не просто \d+? А в остальном — всё тут правильно, на первый взгляд.

0

6 месяцев назад

Марсель Габдрахманов Автор вопроса

Yaroslav Schekin
Вы бы лучше показывали EXPLAIN (ANALYZE, VERBOSE, ...

легко DDL - так удобней просто

0

6 месяцев назад

Yaroslav Schekin

Марсель Габдрахманов
легко DDL - так удобней просто

> легко Ну и тут всё нормально, так? Т.е. parallel workers при random_page_cost = '1.1' используются... или в чём проблема? > DDL - так удобней просто Кому удобнее, извините? Эта информации нужна для того, чтобы удобнее было тем, кто может Вам помочь. ;)

0

6 месяцев назад

Марсель Габдрахманов Автор вопроса

Yaroslav Schekin
> легко Ну и тут всё нормально, так? Т.е. paralle...

всё меняется если убрать explain )

0

6 месяцев назад

Yaroslav Schekin

Марсель Габдрахманов
всё меняется если убрать explain )

Ну так тогда надо вытаскивать актуальные планы с помощью auto_explain. И да, дело тут не в EXPLAIN в любом случае (это совпадение), а либо в настройках тех сессий, либо в том, что нет workers и т.п.

0

6 месяцев назад

Konstantin Zaitsev

Марсель Габдрахманов
всё меняется если убрать explain )

А вы это где запускаете? В psql ?

0

6 месяцев назад

Konstantin Zaitsev

Марсель Габдрахманов
всё меняется если убрать explain )

Большинство драйверов пытаются declare cursor)

0

6 месяцев назад