requests与bs4编码

本文介绍了在Python中使用requests库时如何处理响应内容的编码问题。包括response对象的.text属性如何工作,.content属性的使用场景,以及如何利用BeautifulSoup进行编码自动检测。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

在使用requests库时,response对象的.text属性

r.text
默认的response对象的encoding属性是None,所以在调用r.text解码的时候,request会猜它的编码

If Response.encoding is None, encoding will be guessed using chardet.

encoding = None
Encoding to decode with when accessing r.text.

r.content
如果暂时不清楚编码是什么,则可以调用.content属性,它返回的是自己(bytes),就是还没有编码。然后让bs4库来解析。

bs4 编码
https://www.crummy.com/software/BeautifulSoup/bs4/doc/index.zh.html#id51

Beautiful Soup用了 编码自动检测 子库来识别当前文档编码并转换成Unicode编码. BeautifulSoup 对象的 .original_encoding 属性记录了自动识别编码的结果:

soup.original_encoding

参考文献:
http://docs.python-requests.org/zh_CN/latest/api.html#requests.Response.content

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值