python的cPickle包介绍:点击打开链接
问题:一千万个30维度的向量存储在文本中,每个向量一行,元素以tab键隔开。在使用cPickle写对象时候报错:
google后发现下面三个关于这个的问题:
https://github.com/numpy/numpy/issues/2396
http://bugs.python.org/issue11872
http://www.cnblogs.com/Ponys/p/3671458.html
简言之就是对象太大了,cPickle自身出问题。建议换python3。
本文探讨了一千万个30维度向量存储在文本文件中使用cPickle遇到的问题,并提供了从Python2迁移到Python3的解决策略。
1万+

被折叠的 条评论
为什么被折叠?



