172 похожих чатов

Хочу ускорить выполнения запроса. Подскажите, пожалуйста, как это можно сделать? 1.

Версия Postgres — 12.5
2. Запрос — https://pastebin.com/qchr3RSe
3. \d каждой используемой таблицы — https://pastebin.com/eHdPkiXy
4. План запроса — https://pastebin.com/ictUie93

24 ответов

24 просмотра
Setplus-Mac Автор вопроса

Я думал в сторону секционирования таблицы по event_id Мб, кто-то другое, более изящное решение предложит

Не в тему оптимизации запроса, но мне больно смотреть на условие по дате sm_table_1.datetime <= '2022-07-26 23:59:59' Время 26 июля 23:59:59.001-23:59:59.999 ехидно улыбается где-то в стороне, ДБА рвет волосы на голове, а бизнес пытается найти для клиента, оплатившего счёт, оправдание, почему в системе счёт светится неоплаченным, параллельно разрывая телефоны техподдержки платежного агента Но это так, мысли вслух

Iurii Shaporenko
Не в тему оптимизации запроса, но мне больно смотр...

@Setplus_seC А действительно, почему не datetime < '2022-07-27 00:00:00.000'

Setplus-Mac Автор вопроса

сделал — https://pastebin.com/JkrPawaF вверху — план для множественного OR внизу — план для запроса, где множество OR заменены на IN

Setplus Mac
сделал — https://pastebin.com/JkrPawaF вверху — п...

Очень странно, что во втором случае был использован pkey

Setplus-Mac Автор вопроса
Liman -
Очень странно, что во втором случае был использова...

Согласен. Индекс я честно создал CREATE INDEX ON some_table_1 USING btree(datetime, event_id) INCLUDE(id);

Liman -
Очень странно, что во втором случае был использова...

Скорее всего, запросы просто к разным базам отправлены. Можэт, правда, в процэссе там analyze кто-то запустил, не знаю.

Setplus Mac
Согласен. Индекс я честно создал CREATE INDEX ON ...

А, впрочем, если создали индэкс после выполнения одного запроса и до выполнения другого -- то можэт быть, можэт быть.

Setplus-Mac Автор вопроса
Ilya Anfimov
А, впрочем, если создали индэкс после выполнения о...

После создания индекса выполнил оба запроса,

Setplus Mac
После создания индекса выполнил оба запроса,

Ерунда какая-то. Запросы разные из-за разных оцэнок количества столбцов по условию (4.9 млн vs 4.6 млн) -- а они по идее оцэниваются одинаково что в OR с константами что в ANY с константным массивом. Ладно, это на самом деле тут вообще не важно.

Setplus Mac
Я думал в сторону секционирования таблицы по event...

Вообще, некоторая проблема этого захода -- в том, что у вас тут везде фиаско какое-то. Логичный индэкс неиспользуется. index-only скана нет. Параллелизма нет. Дисковая подсистема тормозит как в 90-х. В таблицэ куча каких-то мусорных индэксов. Вкрячена какая-то сортировка с лимитом -- непонятно, зачем и на что она влияет. И ещё автор всего это дела заявляет, что индэксы на основные поля, по которым идёт поиск и выборка -- не приведены, поскольку не имеют значения. В ситуацыи такого полного фиаско, конечно, любое осмысленное действие будет улучшать ситуацыю. Но это не значит, что это осмысленное действие будет разумным.

Setplus-Mac Автор вопроса
Ilya Anfimov
Вообще, некоторая проблема этого захода -- в том, ...

Подробнее отвечу завтра по каждому пункту. В любом случае, большое человеческое спасибо, что помогаете разобраться, т.к. я сам порядком запутался..

Setplus-Mac Автор вопроса
Ilya Anfimov
Да я ещё и спрашывать не начал.

отвечу —> прокомментирую

1.Второй тожэ глубоко безсмысленнен при наличии первого. 3. Думать, что мешает серверу, пытаться (хотя бы не запуская, чисто explain) смотреть, при каких условиях хоть что-то работает параллельно, и вообще postgres способен так работать, смотреть, при каких условиях оно ломается и как совместить бизнес-требования и параллельность. > 4. ... CEPH Источник боли понятен и очевиден. Если интересует скорость -- просто не делайте так, конечно. Хотя конкретно этот запрос вероятно сможэт отработать с приемлемой скоростью через index-only range scan -- всё равно, у вас там ещё детализирующий запрос, с ним примерно в любом случае будет плохо всё.

Setplus-Mac Автор вопроса
Ilya Anfimov
1.Второй тожэ глубоко безсмысленнен при наличии пе...

Как я понял, пока что единственный вариант ускорить запрос — сделать секционирование таблицы

Setplus-Mac Автор вопроса
Ilya Anfimov
Ну, поняли и поняли.

Спасибо за уделённое время!

Setplus Mac
Как я понял, пока что единственный вариант ускорит...

На самом деле -- вам надо найти толкового DBA, который сможэт научить вас уму-разуму.

Setplus-Mac Автор вопроса

Не очень понял, если честно, о чём идёт речь. Не могли чуть подробнее написать?

Setplus Mac
Не очень понял, если честно, о чём идёт речь. Не м...

Читать примерно вот этот раздел: https://www.postgresql.org/docs/current/runtime-config-query.html Весь и вдумчиво. И да, если у вас необычная система -- то правильные косты тожэ будут необычными... ЗЫ Кстати, что у вас говорит SELECT name, setting, unit FROM pg_settings WHERE name LIKE '%cost'; ?

Setplus-Mac Автор вопроса

Почему? Готов исправиться.

Setplus Mac
Почему? Готов исправиться.

Потому, что помнится индэкс был (event_id, datetime, id).

Похожие вопросы

Обсуждают сегодня

а через ESC-код ?
Alexey Kulakov
29
30500 за редактор? )
Владимир
47
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
13
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Как передать управляющий символ в открытую через CreateProcess консоль? Собсна, есть процедура: procedure TRedirectThread.WriteData(Data: OEMString); var Written: Cardinal;...
Serjone
6
program test; {$mode delphi} procedure proc(v: int32); overload; begin end; procedure proc(v: int64); overload; begin end; var x: uint64; begin proc(x); end. Уж не знаю...
notme
6
Ребят в СИ можно реализовать ООП?
Николай
33
у вас два процесса. один посылает другому сигнал. у вас есть код обоих процессов? если всё не так - расскажите как оно на самом деле. а именно кто кому чего, есть-ли консоли,...
Karagy
6
вы делали что-то подобное и как? может есть либы готовые? увидел картинку нокода, где всё линиями соединено и стало интересно попробовать то же в ddl на lua сделать. решил с ч...
Victor
8
Карта сайта