Подскажите, а в чём ключевая разница между курсорной пагинацией и

Question

Подскажите, а в чём ключевая разница между курсорной пагинацией и

offset, если в обоих случаях нам понадобится сортировка по индексированным полям?

Обе пагинации будут работать медленно, если сортировка с сортировочным индексом не совпадает.. или я не прав?

(кстати, поля по которым возможна сортировка - их всегда индексируют?)

#backend #go #programming #russian

0

18.11.2023

12 ответов

40 просмотров

А4 Одноногое Автор вопроса

Владимир Столяров
Курсорная пагинация работает лучше если в начало с...

Это нужно в сценариях, когда быстро появляются данные. А по скорости, я так понимаю, отличий нет? (ну, если не считать старые бд, где offset не оптимизирован под сортировочный индекс)

0

18.11.2023

Alex

А4 Одноногое
Это нужно в сценариях, когда быстро появляются дан...

Разве offset все равно поднимает данные, которые надо пропустить?

0

18.11.2023

Sergey

А4 Одноногое
Это нужно в сценариях, когда быстро появляются дан...

Что вы считаете "старыми", постгрес например старый?

0

18.11.2023

Konstantin Sh S.

Sergey
Что вы считаете "старыми", постгрес например стары...

Очень старый

0

18.11.2023

А4 Одноногое Автор вопроса

Sergey
Что вы считаете "старыми", постгрес например стары...

Согласен, не совсем корректно выразился) p.s.: в постгресе, кстати, если не ошибаюсь, оптимизацию для offset только в 18 году завезли

0

18.11.2023

Sergey

А4 Одноногое
Согласен, не совсем корректно выразился) p.s.: в...

И всё ещё OFFSET 1000000 будет дорог

0

18.11.2023

А4 Одноногое Автор вопроса

Sergey
И всё ещё OFFSET 1000000 будет дорог

В какой бд и из-за чего? Сортировочный индекс совпадает -> бинарный поиск

0

18.11.2023

Sergey

А4 Одноногое
В какой бд и из-за чего? Сортировочный индекс со...

в PG за счёт того, что ему всё ещё нужно промотать N записей (данные о которых могут лежать в кэшах, а может и на диске), проверить видимость строк (и хорошо, если данные давно не трогали и сработают всякие оптимизации). Так что работы в худшем случае всё равно O(N), хотя и быстрее чем сексканить. Как гласит дока: "The rows skipped by an OFFSET clause still have to be computed inside the server; therefore a large OFFSET might be inefficient."

0

18.11.2023

А4 Одноногое Автор вопроса

Sergey
в PG за счёт того, что ему всё ещё нужно промотать...

А курсор помогает избежать этой лотереи, правильно понимаю? (но там все равно нужно, чтобы сортировка с сортировочным индексом совпадала)

0

18.11.2023

Sergey

А4 Одноногое
А курсор помогает избежать этой лотереи, правильно...

Если вы под "курсором" понимаете передачу начальной позиции через условие (SELECT * FROM table WHERE field>$last_value LIMIT 100) , то да, вы находите по индексу нужную позицию относительно быстро, без гарантий, что пропустите заданное количество записей, а дальше отбираете и проверяете обычно небольшой LIMIT записей.

0

18.11.2023

А4 Одноногое Автор вопроса

Стикер

0

18.11.2023

Владимир Столяров · Accepted Answer

Владимир Столяров

Курсорная пагинация работает лучше если в начало списка добавляются новые элементы

0

18.11.2023

170 похожих чатов

Подскажите, а в чём ключевая разница между курсорной пагинацией и

12 ответов

Похожие вопросы