асинк фреймворке. Ходит с AsyncIOMotorClient в монгу, получает там существенную пачку данных.
После этого серверу нужно эти данные перебрать, взять какие-то определенные поля, чутка перформатировать (и это для каждого элемента), и после вернуть юзеру.
Проблема в том, что записей много, и перебор их в цикле вешает приложение, и отваливает остальные запросы.
Как лучше будет решить эту проблему?
Типа самые банальные идеи - обрабатывать каждый отдельный элемент через gather,
или присвоить операции какой-нибудь Id и отдать в воркер, вернуть юзеру 202 с id и пусть ходит проверяет выполнение. Что было бы best practice? Не обязательно из этих двух, мб есть какой-то вариант ещё лучше.
А можете обрабатывать нужные элементы? (Те которые содержат определённые символы), что бы не вешать программу.
Ну да, я так и делаю. Имеется ввиду, что приходят элементы вида {field1: value1, field2: value2 etc.} и нужно условно взять из каждого элемента data[value1].reformat() и вернуть вида items: [{item1: reformated_value1}, {item2: reformated_value2}]
Обсуждают сегодня