170 похожих чатов

Всем привет. Общий вопрос. Есть ли готовые решения для распараллеливания

задач из очереди по инстансам приложения таким образом, чтобы одновременно выполнялись не более N задач и чтобы инстансы более-менее равномерно нагружались? Имеется в наличии Node.js, Redis, Mongo - желательно ограничиться ими, но можно и что-то еще поставить, если найдётся решение "из коробки".

6 ответов

19 просмотров

Мне кажется обойтись без какого-нибудь прометеуса и лоадбалансера не получится, но буду рад ошибаться 😊

Sergey-R Автор вопроса

прометеус вроде для мониторинга.. я скорее имел в виду какие-то пакеты, которые можно в приложение поставить и к редису подключить и дальше оно уже само

Ну правильно, для мониторинга чего?) Нагрузки, правильно)) Ну и не только этой информации, туда можно отправить любую метрику)) Можно не только прометеус взять для метрики 😉 А теперь смотрите, если у вас есть мониторинг метрик типа нагрузки инстансов и колличества задач на каждом инстансе, то теперь вы можете легко написать логику отправления новых тасков на нужный инстанс с этой информацией, что у вас есть 😉

Sergey-R Автор вопроса

у меня так-то moleculer.js есть, там из коробки можно по CPU балансить и вообще как угодно, но это значит какой-то оркестратор писать надо, а хотелось бы чтобы оно само работало, т.е. как bull.js, но распределенно. на редисе же можно так сделать, странно что никто не сделал

а вот эти модули работы с очередями не подходят? https://moleculer.services/docs/0.12/modules.html#Tasks-queues-amp-jobs

Ну не оркестратор, а лоад балансер, но как бы полюбому нужно будет как-то и кем-то это трекать на разных инстансах)) Но я могу ошибаться, так что не слушайте меня))

Похожие вопросы

Обсуждают сегодня

Господа, а что сейчас вообще с рынком труда на делфи происходит? Какова ситуация?
Rꙮman Yankꙮvsky
29
А вообще, что может смущать в самой Julia - бы сказал, что нет единого стандартного подхода по многим моментам, поэтому многое выглядит как "хаки" и произвол. Короче говоря, с...
Viktor G.
2
30500 за редактор? )
Владимир
47
а через ESC-код ?
Alexey Kulakov
29
Чёт не понял, я ж правильной функцией воспользовался чтобы вывести отладочную информацию? но что-то она не ловится
notme
18
У меня есть функция где происходит это: write_bit(buffer, 1); write_bit(buffer, 0); write_bit(buffer, 1); write_bit(buffer, 1); write_bit(buffer, 1); w...
~
14
Добрый день! Скажите пожалуйста, а какие программы вы бы рекомендовали написать для того, чтобы научиться управлять памятью? Можно написать динамический массив, можно связный ...
Филипп
7
Недавно Google Project Zero нашёл багу в SQLite с помощью LLM, о чём достаточно было шумно в определённых интернетах, которые сопровождались рассказами, что скоро всех "ибешни...
Alex Sherbakov
5
Ребят в СИ можно реализовать ООП?
Николай
33
https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_h_common.erl#L174 https://github.com/erlang/otp/blob/OTP-27.1/lib/kernel/src/logger_olp.erl#L76 15 лет назад...
Maksim Lapshin
20
Карта сайта