python中eval将字符串转换成字典时报错NameError: name ‘null‘ is not defined

本文探讨了在Python中将字典格式的字符串转换为字典类型时遇到的问题及解决方案,尤其是在处理大规模数据集时,如何避免因空字段引发的错误。

最近在做数据处理的时候遇到一个问题,将一个字典格式的字符串转换成字典类型时使用python的内置函数eval()瞬间完成。
错误的发生和解决如下:
我要处理的文件:
这是我的数据文件;严格的说 不算是一个json文件,因为没有最外层大括号,并且每条数据之间没有逗号分隔。
我写的代码如下:

majors = []
with open('document.json', 'r', encoding='utf-8') as file:
    line = file.readline()
    while line:
        major_name = eval(line)['name']
        majors.append(major_name)
        line = file.readline()
major = pd.DataFrame(majors)
major.columns = ['专业名']
major.to_csv('document_major.csv', index=False)

当数据处理到1000多行时报错。
处理手法:

majors = []
with open('document.json', 'r', encoding='utf-8') as file:
    line = file.readline()
    count = 1
    while line:
        print(count)
        count += 1
        major_name = eval(line)['name']
        majors.append(major_name)
        line = file.readline()
major = pd.DataFrame(majors)
major.columns = ['专业名']

查看日志:发现处理到第1525条数据时就报错:NameError: name ‘null’ is not defined。查看第1525条数据发现有空字段:
在这里插入图片描述
处理手法:使用字符串的replace(‘要被替换的内容’, ‘要替换成什么东西’)。
最后 但往往是最重要的:比较坑的是我尝试过:
line = line.replace(‘null’, ‘’)
line = line.replace(‘null’, ’ ')
line = line.replace(‘null’, ‘-’)
line = line.replace(‘null’, ‘0’)
直到第四条才成功,足以看出eval()在做字典格式的字符串转字典时,要求还是很严格的。
最终版:

majors = []
with open('document.json', 'r', encoding='utf-8') as file:
    line = file.readline()
    count = 1
    while line:
        line = line.replace('null', '0')
        major_name = eval(line)['name']
        majors.append(major_name)
        line = file.readline()
major = pd.DataFrame(majors)
major.columns = ['专业名']
major.to_csv('document_major.csv', index=False)
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值