python multiprocessing pool(进程池)报错:pool objects cannot be passed between processes or pickled

分类: python

2017-11-09

|

6891

|

评论:1

分享:

在类中把进程池设为成员变量,同时把self作为参数传给线程池中的函数的时候会报错:

pool objects cannot be passed between processes or pickled
有两种方法可以解决
  • 第一种
class Test(object):
    def run(self):  
        self.pool=Pool(2)
        self.pool.apply_async(func,(xx,xx))

    def __getstate__(self):
        self_dict = self.__dict__.copy()
        del self_dict['pool']

        return self_dict

    def __setstate__(self, state):
        self.__dict__.update(state)
        
  • 第二种 使用pathos包中的进程池
class Test(object):
    def run(self):  
        from pathos.multiprocessing import ProcessPool
        self.pool=ProcessPool(2)
        # apipe 就是 apply_async
        self.pool.apipe(func,(xx,xx))
        
   



本文共 1 个回复

哈哈
发布于:2018年5月22日 11:36
测试333 :eek: :???: :cool:

gojuukaze
发布于:2018年5月22日 11:39

回复 哈哈 :

哇,测试


发表评论 (对文章评论)

captcha