отдохнуть от питона и плюсов
в качестве упражнения взял задачку с собесов классическую - "скачать стотыщ урлов"
споткнулся на асинхронном решении - такое ощущение, что у токио-лупа есть какой-то лимит на количество футур - если на 34 строчке подставить 50 (количество урлов) то все отрабатывает ок: если сотню - он выводит ответы первых пары десятков и виснет намертво
https://play.rust-lang.org/?version=stable&mode=debug&edition=2021&gist=50c2e5499ba3c49e3c92fcd3e7a8ec3b
гугл не помог (
прочитал "решил вот поиграть в Раст"
reqwest::get: NOTE: This function creates a new internal Client on each call, and so should not be used if making many requests. Create a Client instead. если я правильно понимаю, вместо "прямого" вызова get'ов на url, создаем клиент из каждого url'а и из него уже get используем
нет, создаём один клиент и у него дёргаем гет на каждый урл
во, это уже звучит более нормально
один клиент = одна сессия
попробовал исправить на использование Client, та же проблема - в зависимости от числа запросов в условии цикла успешно завершается несколько их них (чем больше запросов - тем меньше успешно отрабатывают) и виснет async fn async_example() { let mut result_vec: Vec<_> = Vec::new(); let client = Client::new(); for i in 1..100 { let url = format!("http://127.0.0.1:8080/{i}"); result_vec.push(print_result_from_future(client.get(url).send())); } join_all(result_vec).await; } - код сейчас выглядит так
в доке увидел "This method fails if there was an error while sending request, redirect loop was detected or redirect limit was exhausted" (https://docs.rs/reqwest/latest/reqwest/struct.RequestBuilder.html#method.send) то есть вполне возможно, что все-таки redirect limit мешает дальше отправлять запросы если бы я понимал где тот redirect limit указан и как его изменить))
кажется что тут речь про http redirect
понимаю, что может быть http redirect, но из того что я могу предложить - https://docs.rs/reqwest/latest/reqwest/redirect/struct.Policy.html#method.redirect попробуй поставить none(), возможно это поможет или условный limited в миллион, если это будет иметь смысл хоть какой-то я в reqwest сам не профессионал, думаю видно))
даже если в этом проблема - не должно ли оно падать с паникой во время unwrap?
ну, по логике - должно, иначе это уже будет нарушать семантику или гайдлайны языка (в большинстве случаев)
занятно, что оно жрет целое ядро при этом
я думаю это либо неграмотное использование асинхронного рантайма либо так надо в самом токио, наверное на то есть какие-то причины я в асихронщине пока глубоко не копался
Обсуждают сегодня