ты этот несчастный ы3 нагружаешь?
Питоном беру из backblaze и кладу в S3
параллельность есть какая?
50 gevent тредов х 8 процессов
попробуй более менее используемой тестилкой пройтись, вместо своего скрипта.
hsbench в 10 тредов дает 25МБ/сек для PUT операций 😳
Фухх благодарю, вот это и требовалось доказать!
Вам что нужно? Шашечки или ехать?
ну и исключить что это не backblaze вас ограничивает, пописать с него в какой-либо другой платный s3 совместимый сторадж например
Бакблейз точно может быстрее отдавать. Вот только в этот же самый бакет не пробовал писать бенчмарком, в котором уже 50млн объектов. Подозреваю что может быть из-за размера бакета замедление, из тюнинга я ему делал только 1000 шардов для индекса.
скорее в gevent дело, чем в шардах.
Обсуждают сегодня