172 похожих чатов

Всем привет! Делаю что то похожее на par_iter из rayon,

но производительность хромает. Слишком много времени уходит на создание чанков, проход по ним в тредах, сбор данных с канала. То есть в сингл треде все происходит в разы быстрее. Каким образом такое чудо можно оптимизировать? https://play.rust-lang.org/?version=stable&mode=debug&edition=2021&gist=73b95af3d365642510a652f3fe2a8a8d

8 ответов

17 просмотров

снизить число аллокаций, щас они прям на каждый чих делаются — не надо так например, нет никакого смысла (кажется) собирать итератор в вектор, чтобы тут же сделать из него опять итератор (50-51 строки), collect можно убрать и использовать https://docs.rs/itertools/latest/itertools/trait.Itertools.html#method.chunks из itertools (да, он есть на плейграунде)

а если передать в треды не чанки а индексы на чанки, а треды брали бы из одного большого пошареного массива?

Huterok- Автор вопроса
Дмитрий ^
а если передать в треды не чанки а индексы на чанк...

Но разве не будет ли так хуже, когда так часто будут вызываться локи и треды придется постоянно ждать

Huterok
Но разве не будет ли так хуже, когда так часто буд...

у тебя будет немного фалс шаринга мб и все. Зачем тебе лок если каждый тред пишет в свой чанк?

Αλεχ Zhukovsky
у тебя будет немного фалс шаринга мб и все. Зачем ...

а без локов такое делать только unsafe можно?

Artem
а без локов такое делать только unsafe можно?

split_at_mut можно вызывать из сейф кода, и дальше с чанками работать как удобно.

Похожие вопросы

Обсуждают сегодня

Всем привет! Имеется функция: function IsValidChar(ch: UTF8Char): Boolean; var i: Integer; ValidChars: AnsiString; begin ValidChars := 'abcdefghijklmnopqrstuvwxyzABCDE...
Евгений
44
Чтобы перехватить все нажимания буков на форме, надо хук ставить? Пробовал на форме ОнКейДаун, оно ловит клаву если фокус не на компоненте с вводом текста
Serjone
15
лучше скажите, причём тут паскаль?
Alexey Kulakov
36
Всем привет! вывожу на общей стр дочерние ресурсыв каждом ресурсе галерея, и первая фотка должна выводиться на общей [!DocLister? &prepare=photo !]
Alekso
12
А можно вопрос? Мне сегодня сказали что у меня функция (которая просто заполняет массив значениями) не правильная void Full(double * arr, int n) { for (int i = 0; i < n; i...
† C E †
7
День добрый, подскажите пожалуйста, есть ли какой-то способ сказать ребару не компилировать определённое приложение? Всю доку их перечиатл ничего подобного не нашёл
Кирилл
14
Добрый вечер. Хочу чтобы у меня в классе поле было функцией, которая возвращает строку. Делаю так: interface ... TGetOutPath = function : String of object; ... protec...
Kirill Filippenok
12
Народ! Впервые клиенту пришло письмо от РКН, у вас, дескать, есть яндекс метрика, а нигде не написано, что вы ее юзаете. Никто не сталкивался?
Sasha Beep
10
Это может быть все-таки не флудвейт? у меня ботфазер принимает изменения и отображает даже что они изменились, на видео видно что он прислал якобы уже измененное описание, н...
OVERLINK
13
Здравствуйте, хочу сделать HelloWorld в консоли Дельфи, но функция API ничего не выводит, что я делаю не так? program Hello; {$APPTYPE CONSOLE} uses System.SysUtils, WinAPI.Wi...
Sergey Vinogradov
20
Карта сайта