Приветствую. Всё-таки читать файлы списки файлов конкурентно имеет смысл мало

смысла
https://rentry.co/zkd6z/ (upd: Результаты ошибочны. Как подсказал Alex , «большая разница в скорости связана с кэшированиием». Надо делать сначала sync. Непонятно, почему на последовательные запуски c одним каталогом. Но кэш благотворно влияет на конкурентную вычитку, видимо из-за малых локов на нём.)

Эта моя поделка cчитает файлы из одного или нескольких исходных каталогов learing/filelist/src/bin/main.rs · tests/filelist · linux / fs · GitLab

В 43-й строчке я не предполагаю ошибок передачи, что неправильно.
И вот тут интересно было бы рабзить impl Stream<Item = Result<DirEntry, Error>> нa (impl Stream<Item = DirEntry>, impl Stream<Error>). Соответственно, иметь 2 канала.
- Но первая проблема: при создании итератора он переносится, т.е. его не используещь 2 раза.
- Второе, не слишком ли затратно будет проходить 2 раза по файловой системе?
(Даже при том, что сейчас tx2.send(result).await.ok(); быстрее, чем передача по каналу и rx.recv().await Интересно, почемму?).

Остаётся вариант перед послылкой раскрывать Result<DirEntry, Error>>, и посылать куда хочется. Ещё лучше варианты есть?
Другие советы про это тоже с благодарностью приниимаю.

2 ответов

17 просмотров
Victor-Kulichenko Автор вопроса

> Соответственно, иметь 2 канала. Подозреваю, что это не сработает let (errTx, mut errRx) = mpsc::channel::<std::error::Error>(1); Будет ли передавать/принимать все типы ошибок (включая дженерики, и м.б вообще другие, как SendError)?

Victor-Kulichenko Автор вопроса
Victor Kulichenko
> Соответственно, иметь 2 канала. Подозреваю, что ...

Но я бы хотел обрабатывать ошибки не как в предыдущем исправлении, а отдельно. Конечно, реализация не может быть mpsc::channel::<std::error::Error>, может быть вот такая: Box<dyn Error + Send + Sync>. Заодно собрал все join-хэндлы в одном векторе, и futures::future::join_all(handles).await;. В итоге так. Мне пришлось залочить stdout перед печатью счётчика на stderr. Есть какое-то лучшее решение по синхронизации stdout и stderr ?

Похожие вопросы

Обсуждают сегодня

Ребята, всем привет. Подскажите, пожалуйста, можно ли как-то через бота понять, что этого бота добавили в группу\канал и выдали ему права администратора?
Artem Stormageddon
9
Привет всем! Почему этот код не срабатывает при добавлении или удалении пользователя из чата? bot.on('chat_member', async (ctx) => { console.log(ctx); }) bot.launch({allo...
Alexander
5
Всем привет. Не понимаю, в чём тут шутка юмора. Убирается только разрешение на send_messages. А send_media_messages остаётся. Как сделать, чтобы оба убирались? await b...
Alexander
2
Ребята привет. Telegraf 3.38 актуален ещё или лучше обновиться?
𝙊𝑙ẽ𝘨 // Rabbit Hole
2
Есть ли лимиты на кол-во вебхук по домену? Стоит в данный момент 900+ ботов и бывает бот перестает отвечать (не приходят вебхуки) 🐒 Помогает только перезапуск
ᅠ [ Кому не ответил, дублируйте ]
11
'frakturBold' => ['𝖆', '𝖇', '𝖈', '𝖉', '𝖊', '𝖋', '𝖌', '𝖍', '𝖎', '𝖏', '𝖐', '𝖑', '𝖒', '𝖓', '𝖔', '𝖕', '𝖖', '𝖗', '𝖘', '𝖙', '𝖚', '𝖛', '𝖜', '𝖝', '𝖞', '𝖟', '𝕬', '𝕭', '𝕮', '𝕯'...
Roma
4
Товарищи, здравствуйте Подскажите, пожалуйста, может кто-нибудь сталкивался с такой задачей Через вебапку можно сканировать qr-код, а есть ли возможность считывать nfc?
Artem Stormageddon
8
Товарищи, я с вопросом На сколько мне известно, это, конечно, зависит от того, как программа использует процессор, но у меня всё равно остаётся вопрос Допустим, есть 2 проце...
Shen
1
Визуальное отображение моделей таблиц sql какое посоветуете?
Shen
7
Коллеги, здравствуйте Подскажите, пожалуйста. я почему-то всегда думал, что если переходить по ссылке такого формата(t.me/bot_bot?start=1) на бота. То бот сразу прожимает кн...
Artem Stormageddon
3
Карта сайта