Подскажите пожалуйста, как ускорить загрузку данных ? У меня

Question

Node.js — русскоговорящее сообщество

Александр Лактионов

Подскажите пожалуйста, как ускорить загрузку данных ? У меня

сервер формирует данные и считает их достаточно долго. 30 человек =5 секунд

#backend #javascript #node.js #programming #russian

0

30.03.2021

27 ответов

22 просмотра

Grigorii K. Shartsev

Скорее всего ускорить формирование и расчёт данных на сервере ¯\_(ツ)_/¯ Тогда быстрее загрузятся.

0

30.03.2021

Александр Лактионов Автор вопроса

У меня есть одна большая коллекция, которая имеет такую структуру и я потом формирую правильный мне список в контроллере через Lodash. Подскажите советом пожалуйста )

0

30.03.2021

Grigorii K. Shartsev

Замерьте время этого куска, чтобы понять, какую часть времени тратится на работу с БД, а какую на преобразование данных. Если действительно он медленный, можно думать, как эту работу перенести на сторону БД, например, или как это написать оптимальнее.

0

30.03.2021

✙ Nikita 🇺🇦🇵🇱🇱🇻🇱🇹🇪🇪🇺🇸🇬🇧🇨🇿🇫🇷🇩🇪🇮🇹🇧🇬🇹🇼🇯🇵🇰🇷🇹🇷🇪🇸🇬🇷

кстати а если взять два варианта: 1) делаешь 1 запрос бд с джойном двух таблиц 2) делаешь 2 запроса к бд и джойнишь на стороне приложения что будет быстрее и почему? *не учитывая время на сеть, те отправку данных туда сюда* P.S. бд будет скорее конечно же, но почему

0

30.03.2021

Александр Лактионов Автор вопроса

То есть лучший вариант переписать ? А как нормальные сайты это реализовывают? Мб в Cache хранить ?

0

30.03.2021

Grigorii K. Shartsev

1. Во-первых, СУБД разработаны с расчётом на быстрое выполнение таких операций. Особенно, когда они выполняются часто. Во-вторых, ты ручным джоином блокируешь основной поток приложения в асинхронном приложении

0

30.03.2021

Лариса Георгиевна

Да можно в воркере, конечно, чтобы не блокировать основной поток. Вопрос — зачем...

0

30.03.2021

✙ Nikita 🇺🇦🇵🇱🇱🇻🇱🇹🇪🇪🇺🇸🇬🇧🇨🇿🇫🇷🇩🇪🇮🇹🇧🇬🇹🇼🇯🇵🇰🇷🇹🇷🇪🇸🇬🇷

а как они оптимизируют эти джойны (субд)?

0

30.03.2021

Личинка Кайтера

Индексы

0

30.03.2021

Sergey Kazak

индексы, кэш как минимум. Вообще оперции джойна на сервере имеют смысл только в таких языках как Си, Rust, Golang, C++, Haskell. И то только по причине хорошего умения в асинхрон + многопоток и дикую скорость самих приложений. Но, обычно и там не страдают джойном таблиц на сервере.

0

30.03.2021

Личинка Кайтера

Да всё равно даже sqlite будет быстрее, на Rust ещё писать надо уметь чтоб получилось быстро

0

30.03.2021

Александр Лактионов Автор вопроса

Монгу лучше не использовать для хранения больших данных? (У меня не большие данные)

0

30.03.2021

Sergey Kazak

sqlite не будет точно, но тут нужно понимать что выигрыш от такого джоина минимальный, а гемороя очень много. На больших объемах начнется просадка, да и все функции и примочки писать руками такое себе.

0

30.03.2021

Yūri 🇺🇦 💜 Ly

Изначально монга наоборот себя представляла как бд для больших данных

0

30.03.2021

Sergey Kazak

монга как раз и предназначена для работы, с охрененно большими данными, а не для того что бы на ней пилить блоги =)

0

30.03.2021

Александр Лактионов Автор вопроса

У меня таких будет 100 пользователей, сейчас 35 и уже 5 секунд загрузка