170 похожих чатов

Привет! Подскажите плиз правильно ли понимаю, что при перегонке файла

в с3 этот файл будете жить в хипе до следующей сборки мусора?

Принимаешь стрим с клиента и сразу же партиями кидаешь в с3. В таком кейсе байтбуфер, который создаешь будет жить до след сборки?

По графикам если грузишь 200мб файл, то и использование хипа растет тоже около 200 мб и потом со сборкой мусора подчищается

18 ответов

38 просмотров
Vlad K- Автор вопроса

Мультипарт и гпрс стрим

Vlad K
Мультипарт и гпрс стрим

ну мультипарт должен на диске лежаать, если ты стримом его потом читаешь

Vlad K- Автор вопроса
Alexandr ∨∧‾ Emelyanov
ну мультипарт должен на диске лежаать, если ты стр...

Принимать мультипарт в темп файл и темп файл перегонять в с3?

а ты буферами как читаешь? в цикле новый буфер?)

Ты, так или иначе, сохранишь мультипарт сначала на диск(после определенного трешхолда) и это правильно, так сделано везде. Но вот момент с тем, что ты стримишь по grpc в s3 я не совсем понял, у вас какой-то свой коннектор к s3?

Vlad K- Автор вопроса
Ilya Starchenko
Ты, так или иначе, сохранишь мультипарт сначала на...

Нет, в случае обеих ручек сохраняю в темп файл. Потом как тут Low-level api https://docs.aws.amazon.com/AmazonS3/latest/userguide/mpu-upload-object.html

Vlad K- Автор вопроса
Ilya Starchenko
А где grpc-то?:)

При приеме файла от клиента

Vlad K
При приеме файла от клиента

А, у вас там какой-то гейтвей, который далее стримит в твой сервис по grpc?

Vlad K- Автор вопроса

Угу, то же самое

Vlad K
Угу, то же самое

А откуда у тебя тогда bytebuffer появился?

Vlad K- Автор вопроса
Vlad K
При отправке в с3

Ну так передаешь inputStream от tmp-файла в putObject.

Похожие вопросы

Обсуждают сегодня

а зачем этот вопрос для удаления из чата?
Mёdkinson Medvezhkin
63
Всем привет! Подскажите. Я написал приложение на Delphi 10.2 Tokyo под Windows 10. И передо мной стал вопрос о том чтобы сделать это приложение кроссплатформенным (под Linux и...
Дмитрий Завгородний
24
Почему стало ломаться на D11? "739002.86400000' is not a valid timestamp" function IncDateTime(aStamp:TTimeStamp;aKind:TTriggerKind;aInterval:Integer):TDateTime; //aStamp = 2...
Катерина Свиридова
8
Привет всем. Подскажите где можно посмотреть, какая версия электрон, поддерживает версии windows? Некий changelog. Мне бы желательно, поддержку 7,8,10... latest, как понимаю и...
Anonym Squad
21
Портфолио: Зовут меня Александр, мне 36 лет. Город Пушкино. Общий рабочий стаж: ~14 лет Уровень квалификации: Senior Full-stack developer Где прочесть мой код? https://github....
Magic
10
Есть ли смысл устраиваться на 1с ? Даст это плюс в дальнейшем трудоустройстве на php? Просто у меня в городе вакансий на пхп нету. Или лучше удаленно искать. Опыта работы нету...
Azamat
14
а где есть mysql cloud кроме яндекс-клауд?
Oleg Nosov
13
hi im a cs student. i need some advice from people who have enough experience in Embedded Software. I need to know whether this profession is suitable for me. I have watched s...
Sahand 🏔️
8
Не ну фпц - это уже просто троллинг какой-то. Элементарный код нельзя собрать. ЧЯДНТ? program Project1; {$mode delphi} uses SysUtils, Classes, Generics.Collections; var...
Peter
4
вот что получается в интерпрететоре, работает и результаты выгляд разумными, но то как выглядит код мне не нравиться, а понять куда двигаться не очень могу, если кому не лень ...
Fedor
42
Карта сайта