报错：PicklingError: Can‘t pickle ＜type ‘function‘＞: attribute lookup __builtin__.function failed

最新推荐文章于 2022-11-03 20:49:25 发布
最新推荐文章于 2022-11-03 20:49:25 发布
阅读量1.5k 收藏
点赞数
文章标签： python
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/ISs_Cream/article/details/116024786
版权
博客讲述了在Python2.7中遇到多进程执行函数时出现PicklingError的问题，该错误源于函数使用了不可序列化的装饰器。通过删除装饰器后，错误消除。在调试模式下，程序会卡住不继续执行，而在直接运行时则不显示错误。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

python2.7在使用的多进程执行一个函数时出现错误【PicklingError: Can’t pickle <type ‘function’>: attribute lookup builtin.function failed】,怎么检查都不知道哪儿错了，最后发现这个函数不能使用装饰器，把装饰器删除之后，错误就消除了，如下图。
在这里插入图片描述
将上图中的装饰器删除即可。注意这个报错是在debug的情况下才发现的，如果直接运行程序，那么程序会一直卡在多线程执行某个函数得语句，不往下执行，也不报错。

948CSheLL
关注
PicklingError: Can‘t pickle ＜function ＜lambda＞＞: attribute lookup ＜lambda＞ on __main__ failed解决方案
weixin_43178406的博客
01-18 1万+
本文主要介绍了PicklingError: Can’t pickle : attribute lookup on __main__ failed解决方案，希望能对学习Python的同学们有所帮助。 文章目录 1. 问题描述 2. 解决方案
Python中的PicklingError异常可能会在序列化或反序列化过程中出现
BUG？不存在的！
05-25 502
当 pickle 序列化一个 lambda 函数时，pickle 尝试从函数所在的模块中查找函数的定义。但是，由于 lambda 是匿名函数，它没有在模块中注册，pickle 无法正确地找到要序列化的实现。然而，在序列化或反序列化过程中，如果涉及到 lambda 函数，就会遇到 “PicklingError: Can’t pickle : attribute lookup on。我们可以将 lambda 函数包装到新类中，并在 pickle 的序列化和反序列化过程中使用该包装类。
cpickle.picklingerror can't pickle type 'module' attribute lookup __builtin__.module failed
sjx_5937681的博客
02-16 2297
最近在使用进程池的时候发现了这错误！下面是自己调用的简化过程，不考虑语法错误，大概就是map函数的第二个参数中放了一个包含类实例的迭代器，这个类包含了一个模型参数初始化的tensorflow的session def func(net): return net.predict() class Detecter(object): def __init__(self, file): with t...
python functiontype_Python多处理PicklingError:无法pickle<type'function'>
weixin_39716877的博客
11-25 341
这是一张list of what can be pickled。特别是，函数只有在模块的顶层定义时才是可选择的。这段代码：import multiprocessing as mpclass Foo():@staticmethoddef work(self):passif __name__ == '__main__':pool = mp.Pool()foo = Foo()pool.apply_asy...
学习backtrader笔记(1): _pickle.PicklingError: Can‘t pickle attribute lookup
qq_41578115的博客
01-05 1798
2022年1月5日晚,在学习backtrader时,参考的是优快云下载的资料<Backtrader官方文档中文翻译.PDF>. 本人开发IDE软件用的是pycharm. 当学习到参数优化这一节时用的资料的代码,在运行时报错.报错的提示是:_pickle.PicklingError: Can't pickle <class '__main__.TestStrategy'>: attribute lookup TestStrategy on __main__ failed 然后就
-pickle.PicklingError: Can't pickle <function... pycharm2023运行报错
06-03
然而，在升级PyCharm至2023版本后，你遇到了一个特定的错误：“_pickle.PicklingError: Can't pickle <function...”，这意味着在尝试序列化某个函数时出现了问题。 `PicklingError`通常是由于`pickle`模块无法处理...
Python multiprocess pool模块报错pickling error问题解决方法分析
01-20
本文实例讲述了Python ...PicklingError: Can’t pickle <type>: attribute lookup __builtin__.function failed 查了下官方文档发现python默认只能pickle以下的类型: None, True, and False integers, floa
jython_Jython简介，第2部分：编程要点
cusi77914的博客
06-29 1941
关于本教程 本教程是关于什么的？ 这是分两部分的教程的第二部分，旨在向您介绍Jython脚本语言。 Jython是已与Java平台无缝集成的Python实现。 Python是一种功能强大的面向对象的脚本语言，主要在UNIX环境中使用。 在本教程的第1部分中，您学习了Jython的基础知识，包括安装和设置，访问选项和文件编译，语法和数据类型，程序结构，过程语句和函数。 在第2部分中，...
python进程线程协程区别_进程和线程、协程的区别
weixin_39717865的博客
11-24 773
现在多进程多线程已经是老生常谈了，协程也在最近几年流行起来。python中有协程库gevent，py web框架tornado中也用了gevent封装好的协程。本文主要介绍进程、线程和协程三者之间的区别。一、概念1、进程进程是具有一定独立功能的程序关于某个数据集合上的一次运行活动,进程是系统进行资源分配和调度的一个独立单位。每个进程都有自己的独立内存空间，不同进程通过进程间通信来通信。由于进程比较...
attribute lookup is not defined on builtin
jacke121的专栏
06-26 3043
attribute lookup is not defined on builtin @torch.jit.script_method def channel_shuffle(self, x, groups): batchsize, num_channels, height, width = x.data.size() assert (num_...
解决python多线程报错:AttributeError: Can't pickle local object问题
09-17
主要介绍了解决python多线程报错:AttributeError: Can't pickle local object问题，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
PicklingError: Can't pickle <type 'generator'>: it's not found as __builtin_
10-10 379
多进程传递 参数时，需要是python系统已知的，不然不知道怎么序列化 转载于:https://www.cnblogs.com/xunol/p/3361638.html
模型训练中_pickle.PicklingError: Can’t pickle问题解决办法
热门推荐
Zephyr Hou 的博客
04-23 1万+
模型训练中_pickle.PicklingError: Can't pickle问题解决办法一、问题描述二、解决办法 欢迎学习交流！ 邮箱： z…@1…6.com 网站： https://zephyrhours.github.io/ 一、问题描述 最近在学习 SiamFC 模型的目标跟踪模型时，发现在window平台进行模型训练时总是出现下面的问题： _pickle.PicklingError: Can’t pickle <class ‘pairwise.GenericDict’>: att
[报错解决]_pickle.PicklingError: Can‘t pickle ＜class ‘__main__.Net‘＞: attribute lookup Net on __main__ f
m0_64007201的博客
11-03 2771
报错解决
python multiprocessing遇到Can’t pickle instancemethod问题
weixin_42143550的博客
08-23 822
遇到一个坑，Can’t pickle instancemethod … 前言: 今天写了一个小脚本，因为涉及到cpu运算的事件，所以用了多进程. 因为大量复用了以前的类，就遇到了奇怪的问题。 我这里就不暴露我的业务代码，临时写了个小demo供大家测试下。 #blog: xiaorui.cc import time import multiprocessing class Go(): ...
详解高性能服务框架 Nginx
Java烂猪皮
09-29 540
走过路过不要错过点击蓝字关注我们一：Nginx 模块化设计高度模块化的设计是 Nginx 的架构基础。Nginx 服务器被分解为多个模块，每个模块就是一个功能模块，只负责自身的功能，模块...
PicklingError: Can‘t pickle ＜type ‘function‘＞: attribute....
rasiel_2019的博客
10-13 1168
查了下，原因是python无法使用apply_async传递class function，错误代码如下： import multiprocessing as mp class Foo(): @staticmethod def work(self): pass if __name__ == '__main__': pool = mp.Pool() foo = Foo() pool.apply_async(foo.work) pool.c
python 进程池 freeze_support_Python 进程池的坑：Pickling Error!
weixin_39617044的博客
12-10 429
前阵子在跑Elric下的爬虫任务时，发现了worker进程有偶现的异常挂起的现象，通过strace看到worker进程block在futex(…, FUTEX_WAIT,…)这里，查看了worker的标准输出，发现打印了这么一行东西：1File “../multiprocessing/queues.py”, line 266, in _feed send(obj) PickingError: ca...
python-windows-分布式进程问题：pickle模块不能序列化lambda函数
xdreamman的博客
06-20 2303
在跑廖雪峰的一段代码的时候出了两个问题，第一个问题，经过调研有解决方案，第二个是找到了问题的地方，但是没找到原因 问题1： _pickle.PicklingError: Can't pickle <function <lambda> at 0x000002BAAEF12F28>: attribute lookup <lambda> on __main__ fa...
pickle.PicklingError: Can't pickle <class '__main__.Tudui'>: attribute lookup Tudui on __main__ failed
最新发布
09-14
引用提到了Python默认只能pickle一些特定的类型，如None、True、False、整数和浮点数。而不能pickle自定义的类。这就是为什么你在使用pickle时遇到了`PicklingError: Can't pickle <class '__main__.Tudui'>: attribute lookup Tudui on __main__ failed`的错误。出错的原因是你尝试pickle了一个名为Tudui的类，但pickle无法找到所需的类定义。要解决这个问题，有几种方法可供选择。 方法一是使用`dill`模块，它是pickle的一个扩展，可以pickle更多类型的对象，包括自定义的类。你可以通过`pip install dill`来安装dill模块，并将`import dill`添加到你的代码中。然后，使用dill的`dill.dump(obj, file)`方法来pickle你的对象，以及`dill.load(file)`方法来unpickle它们。 方法二是将你的自定义类定义放在一个单独的模块中，并通过`import`语句将其导入到主文件中。这样，pickle就可以找到并使用该类定义。 方法三是使用`__getstate__()`和`__setstate__()`方法来自定义pickle过程。通过在你的自定义类中实现这两个方法，你可以控制对象在pickle和unpickle时的行为。具体的实现方式可以参考Python官方文档中关于pickle的说明。 以上是三种解决`PicklingError: Can't pickle <class '__main__.Tudui'>: attribute lookup Tudui on __main__ failed`错误的方法，你可以根据自己的需求选择其中一种来解决这个问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值