170 похожих чатов

Всем привет. Сорри за нубский вопрос. Банальная ситуация, но можно

реализовать более чем 1 способом, хочется понять как лучше. По api раз в минут прилетает пак объектов с уникальными id. Эти объекты могут дублироваться т.е. прилетел пак1, потом пак2 и в нем половина объектов как в пак1. Нужно каждый раз отсеивать объекты, которые были ранее, а остальные добавлять в очередь к следующей операции.
Вариант 1 - завести set айдишников, если новый айдишник при попытке добавления в сет возвращает false значит такой объект в очередь не добваляем.
Вариант 2 - завести лист айдишников и отсеивать не уникальные объекты через stream.filter
Вариант 3 - может есть вариант 3?

1 ответов

6 просмотров

Если думать про масштабируемость (когда обработка на разных хостах) - вместо set храним данные в key-value store, например Redis.

Похожие вопросы

Обсуждают сегодня

А чем вам питонисты не угодили?😂
.
79
Всем привет, написал код ниже, но он выдает сегфолт, в чем причина? #include <stdio.h> #include <stdlib.h> #include <string.h> struct product { char *name; float price; };...
buzz базз
75
Ещё такой вопрос. Мне необходимо хранить пароль пользователя локально. Для этого планирую использовать ini файл. Это для автозаполнения полей логин и пароль при авторизации. Е...
Евгений
19
Ты просто гитлеровскую эстетику плохо понимаешь. Он же всё под Цезаря делал. А это как бы запрещённый приём в политике. Пиджаки они зачем все носят? Чтобы показать что они тип...
Ivan Kropotkin
4
а чем лучше всего сделать глобальный лок, если много нодов, до сотни? ну то есть мне надо, чтобы некоторые операции с объектом не происходили одновременно. перемещение между н...
Д. П.
15
А как лучше конвертировать физический адрес в виртуальный при маппинге? В случае ядра у меня, например, direct mapping, первые 768МБ я как есть мапплю в higher half, а остальн...
Evg Resh
26
Hi guys, I'm looking for a good LLM course. Is there any course to learn LLMs in advanced? I'm aiming to use them in my apps, so a perfect course in my openion, is not only a ...
Taha
14
База данных не поможет. Шифрование не поможет. Какие там ещё варианты? Накидывайте.
КТ315
20
А табстоп это сообщение от окна или от элемента управления?
The Bird of Hermes
18
$params = [ 'formid' => 'feedbackForm', 'formTpl' => '@CODE: <form class="form-validate" data-id="ajax_form"> <fieldset class="margin-bottom-md"> ...
Pathologic
1
Карта сайта