72 похожих чатов

Всем привет. Посоветуйте, пожалуйста, как правильно решаются такие задачи. Есть

процедура MS SQL, которая возвращает JSON, массив данных, к примеру клиенты. На вход подаётся offset (с какой записи вернуть), count (сколько записей вернуть) и поле, по которому сортировать. При количестве записей 200к select с order by и offset выполняется около 1.5 минут, когда сортировка идёт по полному имени клиента. Хранятся ФИО отдельно, а выводятся вместе в одном поле. Соответственно и сортировка идёт по сконкатинированному полю. Что можно сделать в данной ситуации, чтобы select быстрее возвращал данные?

7 ответов

12 просмотров

сортировку могут ускорить индексы у колонок

Славик
сортировку могут ускорить индексы у колонок

Индекс не поможет, сортировка идёт по вычисляемому полю

Решается отказом от пейджеров, и заменой их запросами , которые возвращают не 200тыщ ненужных пользователю записей, а 10 нужных ему.

Положыть данные в реляцыонную СУБД с помощью отношэний. И да, тут замечу, что конечно сортировка каких-то жалких 200 тысяч значений -- это первые секунды. В смысле -- дажэ вот если реально нужно каждый раз их сортировать -- то это первые секунды или дажэ менее секунды в типичном сервере СУБД. То, что у вас она длится полторы минуты -- это говорит о том, что ваш сервер просто неумеет хранить и обрабатывать тем методом, которым вы его заставляете. Потому нормальный метод -- прекратить насиловать MS SQL сервер разбором громадной текстовой строки с jsonом, и положыть в него данные нормально. Я, на самом деле, вполне уверен, что и конкретно ваш вариант можно так или иначе оптимизировать -- поскольку по-хорошэму на современном процэ разбор строки в данные и сортировка значений в быстром случае выполняются существенно быстрее, чем указанные минуты. Однако я такжэ подозреваю, что поскольку оптимизировать работу MS SQL сервера вы всё равно неумеете -- то первое что вам стоит сделать -- это переделать своё хранение под то, под которое этот MSSQL рассчитан. Просто чтобы не тратить усилия на изобретение каких-то новых приёмов и обход неожыданных ограничений, а использовать то, но что система рассчитана. И то, подо что написаны примерно все руководства по отптимизацыи mssql сервера.

Mente- Автор вопроса
Ilya Zviagin
Решается отказом от пейджеров, и заменой их запрос...

Запрос 200 тысяч и не возвращал. Возвращает он как раз 10 нужных. Проблема только в том, что для того, чтобы эти 10 нужных найти (согласно фильтрам пользователя на интерфейсе), нужно перебрать все 200 тысяч.

Mente
Запрос 200 тысяч и не возвращал. Возвращает он как...

Нет, ты не понял. Перечитай ещё раз что я написал.

Похожие вопросы

Обсуждают сегодня

Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Вот еще странный косяк, подскажите как бороться. Я git clone сделал себе всего embassy и примеры там запускаю. Всё хорошо. Но вот решил в cargo.toml зависимости не как в приме...
Lukutin R2AJP
3
Всем привет, нужна как никогда, нужна помощь с IO в загрузчике. Пишу в code16 после установки сегментных регистров, пишу вывод символа. Пробовал 2 варианта: # 1 mov $0x0E, %a...
Shadow Akira
14
Добрый вечер, Пока не совсем понимаю как наладить общение между телеграм ботом и ПО для работы с сим боксом. По самому боту так понял: - Нужен некий баланс, который можно поп...
Magic
6
Раз начали говорить про embassy, то присоединюсь со своими парой вопросов. 1) Есть ли сопоставимые аналоги для асинхронного кода в emdebbed? 2) Можно ли внутри задач embassy ...
NI_isx
6
Объясните, пожалуйста, почему компилятор ругается на использование в условии неинициализированной переменной: int x; Task.Run(async () => { x = await somefunc(); }).Wait...
Александр
5
Всем привет. Ребята, подскажите, пожалуйста. у ботов есть ограничение на отправку сообщений - 30 сообщений в секунду, эти ограничения накладываются на все сообщения? или на со...
Artem Stormageddon
4
1. https://www.kaggle.com/code/ahmadrezagholami2001/housing-estimation-linear-regression 2. https://www.kaggle.com/code/ahmadrezagholami2001/uncovering-quality-in-wines-logis...
Ahmadreza
1
Коллеги, я тут для личных нужд пошел ставить MQTT сервер, пощупал mosquitto, но ужаснулся отсутствию такой банальности, как HTTP API для посмотреть список топиков. А тут что,...
Maksim Lapshin
14
Карта сайта