Python 中pickle出现 ascii’ codec can’t decode byte 0xe4 in position 0: ordinal not in range(128) 解决方法

最新推荐文章于 2020-11-18 11:18:20 发布

原创最新推荐文章于 2020-11-18 11:18:20 发布 · 1w 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#Python #编码 #pickle

Python 同时被 3 个专栏收录

64 篇文章

订阅专栏

计算机理论

22 篇文章

订阅专栏

Anaconda

15 篇文章

订阅专栏

本文介绍了解决Python在读取pkl文件时遇到的ascii解码错误的方法。通过调整pickle.load()函数的参数，并对读取到的数据进行适当的编码转换，可以有效避免因unicode字符引起的异常。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、问题

博主在读取pkl文件时出现以下错误：

ascii’ codec can’t decode byte 0xe4 in position 0: ordinal not in range(128)

unicode 最大长度为128，利用Python在写入pkl文件时，unicode 则会被作为“中间编码”。因此将读取进来的ascii编码字符串如果超过128则会报错

二、代码

在pickle.load()第二个参数加上encoding=‘bytes’，读取的pkl文件中含有的字符串需要加上.encode('utf-8')

import sys
if sys.version_info[0] == 2:
    import cPickle as pickle
else:
    import pickle

def load_pickle(path, verbose=True):
    """Check and load pickle object.
    According to this post: https://stackoverflow.com/a/41733927, cPickle and
    disabling garbage collector helps with loading speed."""
    assert osp.exists(path), "File not exists: {}".format(path)
    # gc.disable()
    with open(path, 'rb') as f:
        # check the python version
        if sys.version_info.major == 3:
            ret = pickle.load(f, encoding='bytes')
        elif sys.version_info.major == 2:
            ret = pickle.load(f)
    # gc.enable()
    if verbose:
        print('Loaded pickle file {}'.format(path))
    return ret

load_path = '你的pkl文件路径'
pkl = load_pickle(load_path)

key_byte = '你的key'.encode('utf-8')
item = pkl[key_byte]