win7环境scrapy输出错误日志报错解决方案

最新推荐文章于 2022-07-18 10:00:56 发布

最新推荐文章于 2022-07-18 10:00:56 发布 · 221 阅读

文章标签：

#scrapy #python #win7 #logging #UnicodeDecodeError

scrapy 专栏收录该内容

3 篇文章

订阅专栏

本文介绍在Windows 7系统中使用Scrapy爬虫框架时遇到的日志乱码问题及其解决方案。通过升级Python的logging组件，成功解决了在CMD窗口中出现的UnicodeDecodeError异常。

win7下调试scrapy代码时，出现代码报错，但是未输出到log日志，而是在cmd中报如下错误：

Traceback (most recent call last):
File "d:\python27\lib\logging\__init__.py", line 884, in emit
stream.write(fs % msg.encode("UTF-8"))
UnicodeDecodeError: 'gbk' codec can't decode bytes in position 1274-1275: illegal multibyte sequence
Logged from file scraper.py, line 158

各种尝试均告失败，后来在论坛中发现有人说这个bug在python3环境不存在，于是尝试升级python2.7的logging组件。