Requsets库

最新推荐文章于 2025-03-20 08:53:38 发布
原创 最新推荐文章于 2025-03-20 08:53:38 发布 · 509 阅读 · 2 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

Requsets库

Requests库的7个主要方法

方法说明
requests.request()构造一个请求，支撑以下各方法的基础方法
requests.get()获取HTML网页的主要方法，对应HTTP的GET
requests.head()获取HTML网页头信息，对应HTTP的HEAD
requests.post()向HTML网页提交POST请求的方法，对应于HTTP的POST
requests.put()向HTML网页提交PUT请求方法，对应HTTP的PUT
requests.patch()向HTML网页提交局部修改请求，对应于HTTP的PATCH
requests.delete()向HTML页面提交删除请求，对应HTTP的DELETE

HTTP协议对资源的操作

方法说明
GET请求获取URL位置的资源
HEAD请求获取URL位置资源的响应消息报告，即获得该资源的头部信息
POST请求向URL位置的资源后附加新的数据
PUT请求向URL位置存储一个资源，覆盖原URL位置的资源
PATCH请求局部更新URL位置的资源，即改变该处资源的部分内容
DELETE请求删除URL位置存储的资源

理解PATCH和PUT的区别
假设URL位置有一组数据UserInfo，包括USerID、USerName等20个字段。
需求：用户修改了UserName，其他不变

  • 采用PATCH，仅向URL提交UserName的局部更新请求。
  • 采用PUT，必须将所有20个字段一并提交到URL，未提交字段被删除。
    PATCH的最主要好处：节省网络带宽
    get函数
requests.get(url,params=None,**kwargs)

url:拟获取页面的url链接
params:url中的额外参数，字典或字节流格式，可选
**kwargs:12个控制访问的参数
（data、json、headers、cookies、auth、files、timeout、
 proxies、allow_redirects、stream、verify、cert）

requests函数

requests.requests(method,url,**kwargs)
**kwargs:控制访问的参数，均为可选项
	params：字典或字节序列，作为参数增加到url中
	data：字典、字节序列或文件对象，作为Request的内容
	json:JSON格式的数据，作为Request的内容
	headers：字典，HTTP定制头
	cookies：字典或CookieJar，Request中的cookie
	auth：元祖，支持HTTP认证功能
	files：字典类型，传输文件
	timeout：设定超时事件，秒为单位
 	proxies：字典类型，设定访问代理服务器，可以增加登录认证
 	allow_redirects:True/False，默认为True，重定向开关
 	stream:True/False，默认为True，获取内容立即下载开关
 	verify:True/False，默认为True，认证SSL证书开关
 	cert:本地SSL证书路径

head函数

requests.head(url,**kwargs)

post函数

requests.post(url,data=None,json=None,**kwargs)

put函数

requests.put(url,data=None,**kwargs)

patch函数

requests.requests(url,data=None,**kwargs)

delete函数

requests.delete(url,**kwargs)

Requests库的异常

异常说明
requests.ConnectionError网络连接错误异常，如DNS查询失败、拒绝连接等
requests.HTTPErrorHTTP错误异常
requests.URLRequiredURL缺失异常
requests.TooManyRedirects查过最大重定向次数，产生重定向异常
requests.ConnectTimeout连接远程服务器超时异常
requests.Timeout请求URL超时，产生超时异常
(response异常)r.raise_for_status()如果不是200，产生异常requests.HTTPError

response异常

Response对象
是
Response对象的属性

属性说明
r.status_codeHTTP请求的返回状态，200表示连接成功，404表示失败
r.textHTTP响应内容的字符串形式，即,url对应的页面内容
r.encoding从HTTP header中猜测的响应内容编码方式
r.apparent_encoding从内容中分析出的响应内容编码方式（备选编码方式）
r.contentHTTP响应内容的二进制形式

理解Response的编码

属性说明
r.encoding从HTTP header中猜测的响应内容编码方式
r.apparent_encoding从内容中分析出的响应内容编码方式（备选编码方式）

r.encoding: （没有分析内容）如果header中不存在charset，则认为编码为ISO-8859-1（不能解析中文）
r.apparent_encoding: 根据网页内容分析出的编码方式

shY`
关注
Python爬虫的笔记——Requsets库的使用
zqidiot的博客
10-28 833
首先进行导入包import requests Requests库的get()方法 r=request.get(url) //构造向服务器请求资源的Request对象
win10电脑中python中的requsets库SSL 证书验证时指定证书的正确用法
zhangjingzheng的博客
07-12 981
win10电脑中python中的requsets库SSL 证书验证时指定证书的正确用法 1.先看官方文档 官方文档在这里说的含含糊糊的，比如 verify=’/path/to/certfile，这一句就能把你搞蒙。正常情况下，我们用抓包软件抓https请求就会在电脑里安装相应抓包软件的ca证书。我们第一反应是导出ca证书直接调用就行，但是实际操作中会一直报找不到ca证书。演示代码如下： 我们用fiddler抓包requsests库发出的https请求。 import httpx import reques
第三方库：requests
weixin_42668123的博客
10-19 389
一 requests第三方库 Requests 是用Python语言编写，基于 urllib，采用 Apache2 Licensed 开源协议的 HTTP 库，它比 urllib 更加方便，可以节约我们大量的工作，完全满足HTTP 测试需求。Requests 的哲学是以 PEP 20 的习语为中心开发的，所以它比 urllib 更加简洁 首先需要做的当然是安装requests库了 pip inst...
Requests库详解
weixin_34034261的博客
05-13 1372
requests(爬虫系列之一) 由于最近工作中，与同事对接模拟手机浏览器进行广告模拟跳转。又一次接触用到爬虫的知识，以前用过urllib + bs4 + selenium定向爬取网易一元夺宝的商品信息保存在数据库中，当时，还是太年轻，对爬虫不是很了解，对爬虫的robots协议也不知道。现在重新梳理一下爬虫的...
❤️2万字带你走进python爬虫requests库，史上最全！！❤️
biyesheji1000的专栏
10-23 4368
4.1 requests 库简介 Requests 是一个为人类设计的简单而优雅的 HTTP 库。requests 库是一个原生的 HTTP 库，比 urllib3 库更为容易使用。requests 库发送原生的 HTTP 1.1 请求，无需手动为 URL 添加查询字串， 也不需要对 POST 数据进行表单编码。相对于 urllib3 库，requests 库拥有完全自动化 Keep-alive 和 HTTP 连接池的功能。requests 库包含的特性如下。 ❖ 1Keep-Alive
requsets的过程
Json_Steve的博客
12-20 510
因为requests基于urllib，所以看一下urllib的请求过程。 #!/usr/bin/env python # -*- coding:utf-8 -*- # Author: json_steve import urllib2 # python2 def load_baidu_data(): url = 'http://www.baidu.com' request = ur
requsets模块的学习
weixin_30520015的博客
04-16 168
requests模块的学习 使用之前 pip install requests 发起get，post，请求获取响应 response = requests.get(url,headers) # 发起get请求，请求url地址对应的响应 response = requests.post(url,data={请求体的字典}) # 发起post请求 response的用法 ...
精选资源
requsets.rar
03-11
标题"requsets.rar"暗示了我们讨论的主题，即围绕Python中的requests库展开。这个压缩包可能包含了一些自动化脚本或教程，用于演示如何使用requests库进行HTTP请求。 requests库主要支持GET、POST、PUT、DELETE等...
anaconda 包区别 版本_Anaconda中安装不同版本的python并安装对应包
weixin_39830688的博客
12-19 1575
(作者：陈玓玏)在实际使用Python的过程中，我们常常需要安装不同版本的Python环境，并且安装相应的各个package。这里我们解决三个问题：anaconda中如何安装多个版本的Python；anaconda中如何安装不同版本的Python对应的各个package；如何改变镜像源加速下载。一. anaconda中如何安装多个版本的Python1)在开始菜单中找到anaconda文件夹，打开a...
利用requsets、bs4、re库爬取豆瓣图书top250【Python】
每天都要学Python的博客
07-09 1056
因为最近在练习定向网络爬虫技术，爬了豆瓣电影之后，就是这爬豆瓣图书，具体请看介绍。 介绍 1.用到的库有requests，bs4中的BeautifulSoup，以及正则表达式re库。requests用来获取网页，BeautifulSoup用来解析页面，re用来匹配查找。 2.值得注意的是，博主想把top250的图书的名字、评分、一句话简介提取出来，但是没有看到有的图书是没有一句话简介的，于是刚...
7.requests详解
热门推荐
weixin_40594668的博客
05-12 2万+
安装 首先，requests 库是 Python 的一个第三方库，不是自带的。所以我们需要额外安装。 在这之前需要你先安装好 Python3 环境，如 Python 3.6 版本，如若没有安装可以参考：https://cuiqingcai.com/5059.html。 安装好 Python3 之后，我们使用 pip3 即可轻松地安装好 requests 库： pip3 install requests 更详细的安装方式可以参考：https://cuiqingcai.com/5132.html。 安装完成之后
python模块 — requests
个人博客
03-02 4908
Python 的 requests 库是一个常用的 HTTP 请求库，可以轻松发送各种 HTTP 请求（如 GET、POST、PUT、DELETE 等）。它简化了编写 HTTP 客户端的代码，并且支持 SSL 和连接池等特性。下面是 requests 库中常用的一些方法：requests.get(url, params=None, **kwargs)：发送 GET 请求并返回响应对象。
爬虫 - requests
Waller_的博客
11-25 1326
介绍 使用requests可以模拟浏览器的请求，比起python内置的urllib模块，requests模块的api更加便捷（本质就是封装了urllib3） 注意：requests库发送请求将网页内容下载下来以后，并不会执行js代码，这需要我们自己分析目标站点然后发起新的request请求 安装 >: pip3 install requests 使用 各种请求方式：常用的就是...
requsets库学习笔记
tianyuan233
03-12 471
import requests from requests.packages import urllib3 response = requests.get(‘http://www.baidu.com‘)print(type(response)) print(response.status_code) print(response.headers) print(response.text)
python_爬虫_requests
zk仔的博客
02-25 320
爬虫_requsets导入模块请求方式响应体处理保持会话模式设置代理忽略证书认证设置异常处理其他补充相关文档状态码汇总调试网站 导入模块 # 常规导入 import requests # 用于保持会话 from requests import Session # 用于认证 from requests.auth import HTTPBasicAuth 请求方式 requests.get()...
2. requests.get()函数访问网页(小白入门)
weixin_63986098的博客
06-04 4816
【人工访问网页】在浏览器中输入网址。回车【Enter】。得到搜索结果。这个动作其实就是浏览器向网页所在的服务器发送了一个请求。服务器接收到浏览器的请求后进行处理，返回响应内容，传给浏览器。这个过程我们称之为响应。最后浏览器再对响应内容进行渲染，将网页呈现了出来。所以浏览器与服务器之间，是一个先请求，后响应的关系。【备注】图片来源于风变编程。爬虫的第一步是获取网页。获取网页中最关键的一步就是模拟浏览器向服务器发出请求。Python中有很多库都可以实现向服务器发送请求。今天，我们先来学习requests库。re
python—requests模块详解
W0ngk，一个安全菜鸡，一直在模仿，尚未有超越。
02-10 1万+
requests模块详解
网络爬虫：Requests库入门
MilkLeong的博客
04-11 3546
Requests库主要有七个方法： 1.requests.request() 构造一个请求，支撑以下各方法的基础方法（以下的方法都是通过调用该方法实现的） 2.requests.get() 获取HTML网页的主要方法，对应于HTTP的GET 3.requests.head() 获取HTML网页头信息的方法，对应于HTTP的GET 4.requests.post() 向HTML网页提交POST请求的...
Python-Requests 库详解
最新发布
wanglaqqqq的博客
03-20 3234
Requests 是 Python 生态中 ​。
requsets 怎么加ip代理池
05-16
可以使用 requests 库的代理功能来进行IP代理池的设置，具体步骤如下： 1. 安装 requests 库 如果你还没有安装 requests 库，可以使用以下命令来安装： ``` pip install requests ``` 2. 导入 requests 库 在 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值