python 爬取编码(charset)为gbk的网页

在爬取王者荣耀官网时遇到GBK编码的网页,导致中文乱码。通过尝试两种方法解决了问题:1) 将爬取内容以utf-8编码写入文件再以utf-8打开;2) 直接用gbk编码打开文件。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近因为安卓作业需要,要对王者荣耀的官方网站进行爬取,然而在最开始便遇到了一些问题,王者荣耀官网的网页charset=gbk,所以爬取时需要进行编码转换,然而转换后却依旧中文乱码,经过查找,发现以下两种解决办法:
第一种:

    req = requests.get(headers=header, url=url)
    content = req.content
    print content.encode('utf-8')

然后将输出流到某一文件中,用utf-8编码打开:

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值