У меня есть таблица тасков где храниться инфа о таске

Question

У меня есть таблица тасков где храниться инфа о таске

(дата создания, статус, дата сдедующего запуска) и этих тасок очень много и они будут очень много менять свой статус, больше нигде эта инфа про эти таски не нужна в системе, как обычно поступают? на отдельной бд или где то в памяти?

#backend #javascript #node.js #programming #russian

0

17.10.2020

11 ответов

3 просмотра

Maxim Koylo Автор вопроса

ну например от одного пользователя может быть 200 000 тасок, и каждая из них будет менять свой статус из ожидания на завршенную или проваленую, ну и теперь с маштабируем пользователей на 500 хотя бы

0

17.10.2020

Таймураз Кайтмазов

Забатчи обработку тасок Вероятно, тебе даже не нужно очередь сюда добавлять Сделай отдельный воркер, который просто будет брать пачку актуальных тасок, локать их в редисе и обрабатывать

0

17.10.2020

Maxim Koylo Автор вопроса

ну мне вот прилетает 5 лямов тасок от разных пользователей мне же нужно их сохранить сначало где то так? Ааа ты имеешь ввиду типо сохранять все таски в какуй то постгре, а потом воркер будет брать там с них пачками по 1000 к примеру и пихать в редис и после их выполнения обновлять статусы в редисе, после их выполнения синхронизировать статусы в монге и очищать редис и так поновой?

0

17.10.2020

Maxim Koylo Автор вопроса

я правильно мыслю?

0

17.10.2020

Таймураз Кайтмазов

Что-то в этом духе, но не гарантирую, что мы друг друга поняли

0

17.10.2020

Maxim Koylo Автор вопроса

хорошо спасибо