Дано: Сервис А почти одновременно генерит два события: * X ->

в топик AB -> сервис B
* Y -> в топик АС -> сервис С

Бизнес-логика такова, что событие Y может быть корректно обработано только после того, как серсис B отработает X (сервис B изменит некое состояние, которое требуется для обработки Y).

Вопрос:
Есть ли в кафке какой-то красивый способ отложить обработку Y на какой-нить маленький таймаут, если сервис С "видит", что X ещё не обработан? При этом не останавливать обработку других сообщений.

Быстрое гугление говорит, что вроде как нет. Предлагается эту проблему решать уже вне кафки, в базу там писать и т.п. Или переходить на rabbitmq. Но я решил всё-таки спросить тут, может кто-то такое решал?

4 ответов

6 просмотров

Делать ещё одну очередь

Вам нужна Saga

В кафке такого нет. Этот функционал надо искать в стриминговых фреймворках, типа flink/spark. Гуглить session window aggregation

Сервис B генерит ивент что сообщение X обаботано, сервис С получает ивент и обрабатывает сообщение Y. Задержку можно сделать через Join Window или Store

Похожие вопросы

Обсуждают сегодня

Ребят, а за скок можно впарить анон чат с апишкой и веб админкой ?
Eugene Неелов
15
с помощью чего можно бота добавить как админа в чат? (условно в боте есть кнопка, нажатие на которую приводит тебя к выбору чата и выдаче прав боту)
ηє νєямσяє
5
Ты просто гитлеровскую эстетику плохо понимаешь. Он же всё под Цезаря делал. А это как бы запрещённый приём в политике. Пиджаки они зачем все носят? Чтобы показать что они тип...
Ivan Kropotkin
4
'frakturBold' => ['𝖆', '𝖇', '𝖈', '𝖉', '𝖊', '𝖋', '𝖌', '𝖍', '𝖎', '𝖏', '𝖐', '𝖑', '𝖒', '𝖓', '𝖔', '𝖕', '𝖖', '𝖗', '𝖘', '𝖙', '𝖚', '𝖛', '𝖜', '𝖝', '𝖞', '𝖟', '𝕬', '𝕭', '𝕮', '𝕯'...
Roma
4
Добрый день, не подскажите, если в OC-V3 поменять страндартную директорию /storage/ на /storage2/ - не будет сильно много проблем ?
Max Dubovsky
32
Добрый день, подскажите как правильно сделать filter в backend-e. Есть модель (товар) у который связь belongsToMany (компания), компаний > 4k, поэтому выборку типа ->all(); н...
Max Dubovsky
7
А цены чем оправданы?
Lencore
7
напомните, как заменить placeholder , а не добавить содержимое ?
Artem N
4
Каким то образом можно определить ширину экрана пользователя перед загрузкой partial-а? Надо рассчитать ширину кадров слайдера для ресайза картинок для container-fluid.
Point 111
22
Всем привет. Нужна платная консультация от тех, кто сталкивался с октябрём в кластере или шарит оч хорошо в цмс. Проблема следующая: после переноса в кластер октябрь начал ...
wl
8
Карта сайта