Всем привет стоит задача запускать из ивентлупа cpu-bound функцию ProcessPoolExecutor ругается что

Question

Всем привет стоит задача запускать из ивентлупа cpu-bound функцию ProcessPoolExecutor ругается что

он deprecated, поэтому не хочу его юзать. модуль asyncio.subprocess позволяет запускать только программу из командной строки.

когда я просто пытаюсь создать процесс через Process(target=xxx).start() - вылетает ошибка: TypeError: cannot pickle 'TaskStepMethWrapper' object

подскажите как поступить?

нагуглил вот это, но уверен что есть метод попроще и не такой низкоуровневый

#backend #programming #python #russian

0

15.05.2021

9 ответов

9 просмотров

Тарас Порошенко Автор вопроса

Alex
Думаю тебе нужен https://docs.python.org/3/library...

да, это понятно, но когда запускаешь его с ProcessPoolExecutor, он ругается что он deprecated. Deprecated since version 3.8: Using an executor that is not an instance of ThreadPoolExecutor is deprecated and will trigger an error in Python 3.9. а с тредпулом делать нет смысла, потому что задача cpu-bound

0

15.05.2021

Сергей Королёв

Очевидно сериализуй по другому

0

15.05.2021

Тарас Порошенко Автор вопроса

Сергей Королёв
Очевидно сериализуй по другому

для меня не так очевидно) можешь пример кода написать? думал пикл там обязательная подкапотная часть Process

0

15.05.2021

Сергей Королёв

Тарас Порошенко
для меня не так очевидно) можешь пример кода напи...

500$

0

15.05.2021

Тарас Порошенко Автор вопроса

Сергей Королёв
500$

весьма остроумно, спасибо

0

15.05.2021

Сергей Королёв

Тарас Порошенко
весьма остроумно, спасибо

Обычный ценник

0

15.05.2021

Alex

Тарас Порошенко
да, это понятно, но когда запускаешь его с Process...

Тебе пишет не то что экзекутор задеприкейтили, а его использование. Я аж с перепугу в исходники полез смотреть где там что https://github.com/python/cpython/blob/main/Lib/concurrent/futures/process.py

0

15.05.2021

Тарас Порошенко Автор вопроса

Alex
Тебе пишет не то что экзекутор задеприкейтили, а е...

да, мб неверно выразился, о суть в том что использовать его не хочется, а то потом могут возникнуть проблемы

0

15.05.2021

Alex · Accepted Answer

Alex

Думаю тебе нужен https://docs.python.org/3/library/asyncio-eventloop.html#asyncio.loop.run_in_executor

0

15.05.2021

170 похожих чатов

Всем привет стоит задача запускать из ивентлупа cpu-bound функцию ProcessPoolExecutor ругается что

9 ответов

Похожие вопросы