Python 3 UnicodeEncodeError: 'gbk' codec can't encode错误的解决

本文介绍了解决Python3爬虫中出现UnicodeEncodeError的方法。错误发生在将Unicode字符串写入默认编码为GBK的文件时。文章提供了通过指定文件编码为UTF-8来避免此问题的解决方案。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

正在Windows上用Python 3 写一个爬虫,但是读取网页内容并且把网页内容写进txt文件的时候,出现了这个异常:

UnicodeEncodeError: 'gbk' codec can't encode character '\ue626' in position 94025: illegal multibyte sequence

Google一圈,发现几乎都是一篇东西或者一个解决方法转来转去,基本上都是encode或者decode的时候在括号里面加一个ignore参数,目的是想忽略掉无法编码的字符,感觉不算是解决问题,而是回避了问题,于是再一圈搜,搜到这个:

http://www.cnblogs.com/wangxingyao/p/4662543.html

看完之后发现,问题的原因在于Python 3里面字符串的默认编码是Unicode的,参考这里:

http://stackoverflow.com/questions/6812031/how-to-make-unicode-string-with-python3

而爬虫读取的网页上面的内容,在代码里面是存在字符串变量里的,Windows下面新建的文本文件默认的编码是gbk(Windows简体中文版的系统默认编码就是gbk),当把从网页上读取的内容写到文本文件里面去的时候,意味着把一个unicode的字符序列写入到一个编码是gbk的文件,最后就出错了,解决方法就是在打开一个文件的时候,指定文件的编码,让它以指定的编码打开:

with open('e:/test.txt', encoding='utf-8') as f:
    f.write(content)
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值