Есть массив с функциями. Я в цикле вызываю их все,

Question

Есть массив с функциями. Я в цикле вызываю их все,

и записываю результат выполнения во второй массив.
Как в несколько потоков запустить выполнение функций? Подскажите, что гуглить.

#backend #programming #python #russian

0

22.02.2022

12 ответов

13 просмотров

Елена Максимова

Вы также можете попробовать запускать ваши функции в разных процессах. Тогда они будут выполняться параллельно. Но, процессы просто так вот легко не могут обмениваться данными. Придётся разбираться с тем, как собирать результаты. Ну, и это очень затратно. И зависит от количества ядер.

0

22.02.2022

Елена Максимова

В Python имеются стандартные модули для работы с процессами, потоками и асинхронностью. multiprocessing (https://docs.python.org/3/library/multiprocessing.html), subprocess (https://docs.python.org/3/library/subprocess.html), threading (https://docs.python.org/3/library/threading.html), asyncio (https://docs.python.org/3/library/asyncio.html).

0

22.02.2022

Игорь Автор вопроса

Елена Максимова
Вы также можете попробовать запускать ваши функции...

В функциях умножение матриц небольших, на переданные им данные. Данные одни и те же для всех функций. Результат каждой функции не зависит от работы других функций. В каком порядке они выполняются, тоже не важно.

0

22.02.2022

Игорь Автор вопроса

Елена Максимова
В Python имеются стандартные модули для работы с п...

Спасибо.

0

22.02.2022

Елена Максимова

Игорь
В функциях умножение матриц небольших, на переданн...

Это CPU опреации. Нет никакого смысла запускать в нескольких потоках. Сумаррное время выполнения будет такое же, как и при последовательном выполнении, а то и больше (за счёт затрат на создание потоков). На счёт процессов смотрите сами. Не думаю, что это даст существенную выгоду.

0

22.02.2022

Игорь Автор вопроса

Елена Максимова
Это CPU опреации. Нет никакого смысла запускать в ...

Сейчас они по очереди запускаются. На 1000 шт. уходит 2.5 секунды. Хотелось бы быстрее секунды получить.

0

22.02.2022

Елена Максимова

Игорь
Сейчас они по очереди запускаются. На 1000 шт. ухо...

Боюсь, не выйдет. Не тот язык программирования)

0

22.02.2022

Игорь Автор вопроса

Tensorflow, я не совсем в курсе, что там внутри, вроде на C основные операции выполняются.

0

22.02.2022

Tishka17

Игорь
Tensorflow, я не совсем в курсе, что там внутри, в...

уможение матриц через tensorflow?

0

22.02.2022

Елена Максимова

Игорь
Tensorflow, я не совсем в курсе, что там внутри, в...

Ну тут тогда надо смотреть уже конкретно. В базе своей питон не умеет в многопоточность с CPU операциями. Но некоторые библиотеки, написанные на Си, могут что-то такое в некоторых случаях. На этом я со своими советами всё 😔

0

22.02.2022

Владимир

Игорь
Tensorflow, я не совсем в курсе, что там внутри, в...

Стоп стоп так если тензорфлов - тебе никаких мультипотоков не надо воротить

0

22.02.2022

Елена Максимова · Accepted Answer

Елена Максимова

Если функции выполняют CPU операции, то нет никакого смысла запускать их в разных потоках из-за GIL. Если функции выполняют IO-bound операции, то лучше смотреть в сторону асинхронного кода, он менее затратен, чем многопоточный.

0

22.02.2022

170 похожих чатов

Есть массив с функциями. Я в цикле вызываю их все,

12 ответов

Похожие вопросы