刚开始入坑爬虫
记一次编码报错:
UnicodeEncodeError: ‘gbk’ codec can’t encode character ‘\xbb’ in position 29802: illegal multibyte sequence
再次之前建议大家看看这篇文章,讲的很详细,可能看完就解决了
https://www.cnblogs.com/feng18/p/5646925.html
很懵,看到gbk不能编码什么的,搞得我一直回想是不是我之前改了sublime text的编码之类的(在用sublime text3编辑)
最后是因为python3的默认编码不对
print()函数有限制,不能完全打印unicode字符,其实也就是python的限制
所以改下python的编码为‘utf-8’就好,utf-8是所有编码
import urllib.request
import urllib.parse
import sys
import io
#模仿浏览器发送请求
url = 'http://www.baidu.com/'
sys.stdout