爬虫中requests模块和urllib模块的异同点
相同点:requests模块和urllib模块都能实现对网页的请求,并获取网页数据异同点:requests模块:使用的是对应请求方式的属性/方法,可对性高,方便理解。 对网页编码的方式有多种 能设置请求头的参数 能解析带有中文的网址注:其中content拿到的数据为二进制,需要转化为utf-8才能正常显示,若使用text,则原网页编码格式是什么,拿到的编码格式就是什么urllib模块:对网页申请访问的方法为urlopen(),且需要进行编码处理才能显示正常网页数据 请求
原创
2020-10-07 11:24:25 ·
2555 阅读 ·
0 评论