Всем привет. Есть запрос.. он хорошо работает до 10000 строк

Question

pgsql – PostgreSQL

Oleksii Miuskyi

Всем привет. Есть запрос.. он хорошо работает до 10000 строк

в таблице.. на 100000 работает плохо. Как переделать под курсори? Я ще учусь буду рад помощи

#backend #devops #pgsql #programming #russian

0

21.03.2021

11 ответов

5 просмотров

Oleksii Miuskyi Автор вопроса

Yaroslav Schekin
А при чём тут / чем поможет "переделать под курсор...

Мне нужно реализовать пагинацию по таблице, понимаю что запрос говно. Потому хочу чтоб подсказали в каком направление двигаться, так как учусь

0

21.03.2021

Yaroslav Schekin

Oleksii Miuskyi
Мне нужно реализовать пагинацию по таблице, понима...

Но в этом запросе даже следов pagination нет... и при чём тут JSON, в таком случае? И да, насчёт pagination в принципе: https://use-the-index-luke.com/no-offset

0

21.03.2021

Oleksii Miuskyi Автор вопроса

Yaroslav Schekin
Но в этом запросе даже следов pagination нет... и ...

Ну на беке я буду передавать limit offset и хочу получить данние в json. Не дописал вконце лимит оффсет. Спасибо за ссилку

0

21.03.2021

Yaroslav Schekin

Oleksii Miuskyi
Ну на беке я буду передавать limit offset и хочу ...

"Ненастоящие" запросы нет смысла оптимизировать. Что нужно показать, чтобы Вам помогли с оптимизацией (реального запроса!), я уже писал. И делать это нужно именно на тех данных, где есть проблема, конечно.

0

21.03.2021

Aleksey Stavrov

Yaroslav Schekin
Но в этом запросе даже следов pagination нет... и ...

Вот казалось бы берём b-tree, добавляем в каждый узел счётчик - кол-во узлов, которое равно сумме кол-ва узлов по всем детям. А у листьев это число равно 1. Далее можно быстро делать offset по такому изменённому дереву. Почему так никто не делает?

0

21.03.2021

Yaroslav Schekin

Aleksey Stavrov
Вот казалось бы берём b-tree, добавляем в каждый у...

Потому что это никому настолько не нужно. Т.е. отношение затрат и выгод на практике никогда не в пользу такого решения.

0

21.03.2021

Radist

Aleksey Stavrov
Вот казалось бы берём b-tree, добавляем в каждый у...

Есть одна маленькая проблемка. Индексы не хранят информации о видимости строк, а значит с offset эти счетчики числа дочерних нод никак не помогут, если только мы не говорим о редком случае таблицы, в которую почти никто не пишет. Вкупе с проблемами, которые выше описали (блокировки при апдейтах вышестоящих нод), овчинка выделки не стоит.

0

22.03.2021

Aleksey Stavrov

Radist
Есть одна маленькая проблемка. Индексы не хранят и...

В этом случае мог бы помочь кластеризованный индекс (если я правильно это назвал), но в pg нет такого почему-то, только heap.

0

22.03.2021

Виктор Ткаченко

Aleksey Stavrov
В этом случае мог бы помочь кластеризованный индек...

Кластеризация не поможет идентифицировать неактуальные записи, а лишь даст упорядоченность индекса в соответствии с данными на диске

0

22.03.2021