解决python多线程报错:AttributeError: Can't pickle local object问题


Posted in Python onApril 08, 2020

报错信息:

Traceback (most recent call last):
File “D:/flaskProject/test.py”, line 35, in test
pool.apply(self.out, args=(i,))
File “Python37-32\lib\multiprocessing\pool.py", line 261, in apply
return self.apply_async(func, args, kwds).get()
File "\lib\multiprocessing\pool.py”, line 657, in get
raise self._value
File “\Python37-32\lib\multiprocessing\pool.py", line 431, in _handle_tasks
put(task)
File "\Python37-32\lib\multiprocessing\connection.py”, line 206, in send
self._send_bytes(_ForkingPickler.dumps(obj))
File “*\Python37-32\lib\multiprocessing\reduction.py”, line 51, in dumps
cls(buf, protocol).dump(obj)
TypeError: can't pickle _thread._local objects

原类的构造函数:

class threadtest:

def __init__(self, ipList, user, password):
 self.ipList = ipList
 self.httpAuth = HTTPDigestAuth(user, password)
 return

def out(self, i):
 url = "http://" + i + "/name"
 response = requests.get(url, self.httpAuth)
 print(response.text)
 return

def test(self):
 pool = Pool(processes=2)
 for i in self.ipList:
 pool.apply(self.out, args=(i,))
 pool.close()
 pool.join()
 return
if name == ‘main':
ipList = [‘192.168.2.1', ‘192.168.2.2', ‘192.168.2.3', ‘192.168.2.4', ‘192.168.2.5', ]
a = threadtest(ipList, ‘admin', ‘admin')
a.test()

原因:

在class中对属性进行初始化使用了其它类返回的句柄进行初始化导致,HTTPDigestAuth的返回值不能进行序列化,也就是不能作为cls(buf, protocol).dump(obj)的参数进行序列化。

将self.httpAuth = HTTPDigestAuth(httpUser, httpPassword)修改为:

self.httpUser
self.httpPassword

并将函数HTTPDigestAuth放到类的方法中

修改后:

class threadtest:

def __init__(self, ipList, user, password):
 self.ipList = ipList
 self.user = user
 self.password = password
 return

def out(self, i):
 url = "http://" + i + "/name"
 response = requests.get(url, HTTPDigestAuth(self.user, self.password))
 print(response.text)
 return

def test(self):
 pool = Pool(processes=2)
 for i in self.ipList:
 pool.apply(self.out, args=(i,))
 pool.close()
 pool.join()
 return
if name == ‘main':
ipList = [‘192.168.2.1', ‘192.168.2.2', ‘192.168.2.3', ‘192.168.2.4', ‘192.168.2.5', ]
a = threadtest(ipList, ‘admin', ‘admin')
a.test()

以上这篇解决python多线程报错:AttributeError: Can't pickle local object问题就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
精确查找PHP WEBSHELL木马的方法(1)
Apr 12 Python
Python模块结构与布局操作方法实例分析
Jul 24 Python
python3.7环境下安装Anaconda的教程图解
Sep 10 Python
Django单元测试中Fixtures用法详解
Feb 25 Python
django xadmin中form_layout添加字段显示方式
Mar 30 Python
Django使用rest_framework写出API
May 21 Python
什么是Python中的匿名函数
Jun 02 Python
使用K.function()调试keras操作
Jun 17 Python
Python如何读写二进制数组数据
Aug 01 Python
PyCharm2020.1.1与Python3.7.7的安装教程图文详解
Aug 07 Python
Django数据模型中on_delete使用详解
Nov 30 Python
python实现的web监控系统
Apr 27 Python
解决Python 异常TypeError: cannot concatenate 'str' and 'int' objects
Apr 08 #Python
TensorFlow2.1.0安装过程中setuptools、wrapt等相关错误指南
Apr 08 #Python
解决windows下python3使用multiprocessing.Pool出现的问题
Apr 08 #Python
python操作yaml说明
Apr 08 #Python
python 在右键菜单中加入复制目标文件的有效存放路径(单斜杠或者双反斜杠)
Apr 08 #Python
python将音频进行变速的操作方法
Apr 08 #Python
Python读取配置文件(config.ini)以及写入配置文件
Apr 08 #Python
You might like
使用PHP Socket 编程模拟Http post和get请求
2014/11/25 PHP
8个PHP数组面试题
2015/06/23 PHP
Yii2增删改查之查询 where参数详细介绍
2016/08/08 PHP
JavaScript 编程引入命名空间的方法
2007/06/29 Javascript
Js中获取frames中的元素示例代码
2013/07/30 Javascript
正负小数点后两位浮点数实现原理及代码
2013/09/06 Javascript
EXT中单击button按钮grid添加一行(光标位置可设置)的实例代码
2016/06/02 Javascript
JS实现兼容各种浏览器的高级拖动方法完整实例【测试可用】
2016/06/21 Javascript
Javascript中apply、call、bind的巧妙使用
2016/08/18 Javascript
Javascript动画效果(3)
2016/10/11 Javascript
JavaScript之排序函数_动力节点Java学院整理
2017/06/30 Javascript
jQuery实现文字超过1行、2行或规定的行数时自动加省略号的方法
2018/03/28 jQuery
vue实现通讯录功能
2018/07/14 Javascript
Vuex中的State使用介绍
2019/01/19 Javascript
vue实现的请求服务器端API接口示例
2019/05/25 Javascript
Python中的字符串替换操作示例
2016/06/27 Python
Python基础之getpass模块详细介绍
2017/08/10 Python
通过Python 获取Android设备信息的轻量级框架
2017/12/18 Python
Python实现的朴素贝叶斯分类器示例
2018/01/06 Python
使用Python做定时任务及时了解互联网动态
2019/05/15 Python
Python调用百度根据经纬度查询地址的示例代码
2019/07/07 Python
Python使用type动态创建类操作示例
2020/02/29 Python
Python selenium模块实现定位过程解析
2020/07/09 Python
Python实现对word文档添加密码去除密码的示例代码
2020/12/29 Python
英国著名的茶叶品牌:Whittard of Chelsea
2016/09/22 全球购物
Oracle快照(snapshot)
2015/03/13 面试题
你经历的项目中的SCM配置项主要有哪些?什么是配置项?
2013/11/04 面试题
大学生军训自我评价分享
2013/11/09 职场文书
给国外客户的邀请函
2014/01/30 职场文书
2014年骨干教师工作总结
2014/12/19 职场文书
乡镇科协工作总结2015
2015/05/19 职场文书
休学证明范本
2015/06/19 职场文书
2015年秋季小学开学标语
2015/07/16 职场文书
2015年度环卫处工作总结
2015/07/24 职场文书
人民币使用说明书
2019/04/17 职场文书
Feign调用传输文件异常的解决
2021/06/24 Java/Android