Подскажите, у меня на S3 через репликацию появляются архивчики с

данными, размер от 1 кб до 1гб. Мне надо их распаковать и в нормальную структуру преобразовать все файлы внутри. Для этого лучше лямбду написать, верно?

6 ответов

13 просмотров

Зависит как это реализовано и где ты хочешь это использовать

Max-E. Автор вопроса
Nikita Dwarf Kartman
Зависит как это реализовано и где ты хочешь это ис...

хм, ну есть по сути только бакет с новыми файликами. Остальное вот как раз думаю, как сделать лучше

Max E.
хм, ну есть по сути только бакет с новыми файликам...

У лямбды есть лимит на время исполнения. Но если вы уверены, что файлы небольшие, то проблемы быть не должно

Max-E. Автор вопроса
Yury Alexandrov
У лямбды есть лимит на время исполнения. Но если в...

Самый большой архив - гигабайт, внутри гигов 5-10. 15 минут должно хватить, правда с памятью не понятно пока. Но лямбды видятся самым простым решением

Я не эксперт в aws, но если файлов много, рекомендую также посмотреть на aws batch. Код придётся завернуть в докер контейнер, но ограничений по времени выполнения или ресурсам нету, стоит дешевле, также можно использовать спот инстансы и тогда будет ещё дешевле.

Max-E. Автор вопроса
misha 🐕🚀🌘
Я не эксперт в aws, но если файлов много, рекоменд...

Да, точно. Спасибо, посмотрю батч. Возможно ещё stepfunction можно использовать для триггера

Похожие вопросы

Обсуждают сегодня

Но, может, есть уже проверенная? Наши требования такие: 1. Сообщения должны приходить из Инста в CRM оду 2. Должна быть возможность подключить несколько экаунтов Инстаграм. Р...
Alexander Sharoiko MSE / Александр Шаройко
12
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Я правильно понимаю что нет способов получить список ожидающих заявок на вступление в группу с помощью бота из mtproto?
Шамиль Прилов
9
🙋 Ребята, всем привет. Поправил задачу: Нужно каждому новому сообщению (1 раз по каждому юзеру) в чате прибавлять снизу кнопку с предложением подписаться на канал. Как добавит...
Alexander
1
Добрый день. Мне посоветовали обратиться к вам в чат за помощью. Ситуация описана на скрине. Как мне сказали, мне на бота навесили флудвейт. Есть ли возможность снять его ра...
OVERLINK
7
всем привет помогите пожалуйста используя CDN (GCP) у игроков из вьетнама загружается конфиг (размер 999 bytes) загружается 5 и более минут н а других CDN сервисах такой пробл...
Andrew Krw.
1
Просто по очереди выпиливаешь на ручной маппинг? По методу за раз
Andrii Kurdiumov
7
Вопрос: Здравствуйте! У меня возникла проблема с использованием плагина Mall в OctoberCMS. Я использую все файлы и компоненты в их исходном виде, без изменений. Однако на стр...
𐩱𐩪𐩣𐩱𐩲𐩺𐩡
2
Приветствую. А не подскажете какие ограничения есть на использования api метода setMyName ? Несколько раз сменил имя бота и получил бан на 2 месяца на смену имени.
Slick Slack
8
Привет, коллеги! Возникла задача ограничить максимальный размер вложений для определённых расширений, например, чтобы для изображений лимит был 10 МБ, а для видео — 100 МБ. Ог...
Andro
1
Карта сайта