215 похожих чатов

Кто-Нибудь делал шардированные очереди с приоритетами на Тарантуле, когда одна

очередь не влезает в один шард? Интересно, какой подход выбрали.

8 ответов

10 просмотров

https://github.com/tarantool/sharded-queue можно взять как основу, но приоритетов там вроде нет, придется допиливать самим

Приоритеты есть в драйвере fifottl

я делал. очередь шардируется по классическим правилам, в каждом шарде маленькая независимая часть очереди take выполняется "на все узлы", выбирается таск, который самый приоритетный, остальные релизятся. put делается round-robin и исходя из доступности узлов.

take очень дорогой выходит

Sergey- Автор вопроса

На каждый take обход всех шардов?

Ну если надо получить самую приоритетную таску в рамках всего кластера, то нужно собрать все приоритетные таски с шардов и среди них выбрать уже

А что не влезает в один инстанс тарантула? Большой payload у задач? Или самих задач очень много?

Да. Но вообще в реальности я бы так не заморачивался и просто обходил бы шарды по кругу до тех пор, пока не возьму задачу. При достаточно больших числах тасок и консьюмеров всё равно будет работать более чем приемлемо

Похожие вопросы

Обсуждают сегодня

А чем вам питонисты не угодили?😂
.
79
Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
Ещё такой вопрос. Мне необходимо хранить пароль пользователя локально. Для этого планирую использовать ini файл. Это для автозаполнения полей логин и пароль при авторизации. Е...
Евгений
19
Ты просто гитлеровскую эстетику плохо понимаешь. Он же всё под Цезаря делал. А это как бы запрещённый приём в политике. Пиджаки они зачем все носят? Чтобы показать что они тип...
Ivan Kropotkin
4
а чем лучше всего сделать глобальный лок, если много нодов, до сотни? ну то есть мне надо, чтобы некоторые операции с объектом не происходили одновременно. перемещение между н...
Д. П.
15
Hi guys, I'm looking for a good LLM course. Is there any course to learn LLMs in advanced? I'm aiming to use them in my apps, so a perfect course in my openion, is not only a ...
Taha
14
А как лучше конвертировать физический адрес в виртуальный при маппинге? В случае ядра у меня, например, direct mapping, первые 768МБ я как есть мапплю в higher half, а остальн...
Evg Resh
26
База данных не поможет. Шифрование не поможет. Какие там ещё варианты? Накидывайте.
КТ315
20
А табстоп это сообщение от окна или от элемента управления?
The Bird of Hermes
18
Легче писать на C++ чем на C, если полностью не изучать C++, а знать только основное?
Алмаз
8
Карта сайта