72 похожих чатов

Всем привет. Посоветуйте, пожалуйста, как правильно решаются такие задачи. Есть

процедура MS SQL, которая возвращает JSON, массив данных, к примеру клиенты. На вход подаётся offset (с какой записи вернуть), count (сколько записей вернуть) и поле, по которому сортировать. При количестве записей 200к select с order by и offset выполняется около 1.5 минут, когда сортировка идёт по полному имени клиента. Хранятся ФИО отдельно, а выводятся вместе в одном поле. Соответственно и сортировка идёт по сконкатинированному полю. Что можно сделать в данной ситуации, чтобы select быстрее возвращал данные?

7 ответов

15 просмотров

сортировку могут ускорить индексы у колонок

Славик
сортировку могут ускорить индексы у колонок

Индекс не поможет, сортировка идёт по вычисляемому полю

Решается отказом от пейджеров, и заменой их запросами , которые возвращают не 200тыщ ненужных пользователю записей, а 10 нужных ему.

Положыть данные в реляцыонную СУБД с помощью отношэний. И да, тут замечу, что конечно сортировка каких-то жалких 200 тысяч значений -- это первые секунды. В смысле -- дажэ вот если реально нужно каждый раз их сортировать -- то это первые секунды или дажэ менее секунды в типичном сервере СУБД. То, что у вас она длится полторы минуты -- это говорит о том, что ваш сервер просто неумеет хранить и обрабатывать тем методом, которым вы его заставляете. Потому нормальный метод -- прекратить насиловать MS SQL сервер разбором громадной текстовой строки с jsonом, и положыть в него данные нормально. Я, на самом деле, вполне уверен, что и конкретно ваш вариант можно так или иначе оптимизировать -- поскольку по-хорошэму на современном процэ разбор строки в данные и сортировка значений в быстром случае выполняются существенно быстрее, чем указанные минуты. Однако я такжэ подозреваю, что поскольку оптимизировать работу MS SQL сервера вы всё равно неумеете -- то первое что вам стоит сделать -- это переделать своё хранение под то, под которое этот MSSQL рассчитан. Просто чтобы не тратить усилия на изобретение каких-то новых приёмов и обход неожыданных ограничений, а использовать то, но что система рассчитана. И то, подо что написаны примерно все руководства по отптимизацыи mssql сервера.

Mente- Автор вопроса
Ilya Zviagin
Решается отказом от пейджеров, и заменой их запрос...

Запрос 200 тысяч и не возвращал. Возвращает он как раз 10 нужных. Проблема только в том, что для того, чтобы эти 10 нужных найти (согласно фильтрам пользователя на интерфейсе), нужно перебрать все 200 тысяч.

Mente
Запрос 200 тысяч и не возвращал. Возвращает он как...

Нет, ты не понял. Перечитай ещё раз что я написал.

Похожие вопросы

Обсуждают сегодня

Гайс, вопрос для разносторонее развитых: читаю стрим с юарта, нада выделять с него фреймы с определенной структурой, если ли чо готовое, или долбаться с ринг буффером? нада у...
Vitaly
9
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
длина пакета фиксированная, или меняется?
Okhsunrog
7
Вот еще странный косяк, подскажите как бороться. Я git clone сделал себе всего embassy и примеры там запускаю. Всё хорошо. Но вот решил в cargo.toml зависимости не как в приме...
Lukutin R2AJP
5
А в каком формате фреймы? Сам формат сейчас придумываешь, или что-то готовое нужно распарсить?
Okhsunrog
5
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
Всем привет, нужна как никогда, нужна помощь с IO в загрузчике. Пишу в code16 после установки сегментных регистров, пишу вывод символа. Пробовал 2 варианта: # 1 mov $0x0E, %a...
Shadow Akira
14
Раз начали говорить про embassy, то присоединюсь со своими парой вопросов. 1) Есть ли сопоставимые аналоги для асинхронного кода в emdebbed? 2) Можно ли внутри задач embassy ...
NI_isx
6
сделал сайт, прикрутил в боте сайт, и виджет логина. как автоматически логинить пользователя в аккаунт(телеграм), при входе с бота?
Александра Чернивецкая
5
Карта сайта