Python网络请求、JSON转换、多线程、异步IO

在 Python 众多的 HTTP 客户端中，最有名的莫过于 、 和 。requestsaiohttphttpx

在不借助其他第三方库的情况下， 只能发送同步请求； 只能发送异步请求； 既能发送同步请求，又能发送异步请求。requestsaiohttphttpx

那么怎么选择呢

• 只发同步请求用 ，但可配合多线程变异步。requests
• 只发异步请求用 ，但可以配合await变同步。aiohttp
• httpx可以发同步请求也可以异步，但是请求速度同步略差于 ，异步略差于requestsaiohttp

Asyncio 的强大。但是，任何一种方案都不是完美的，都存在一定的局限性，Asyncio 同样如此。

实际使用中，想用好 Asyncio，特别是发挥其强大的功能，很多情况下必须得有相应的 Python 库支持。

比如

requests 库并不兼容 Asyncio，而 aiohttp 库兼容。

请求

这里先说requests

安装依赖

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6"><span style="color:#333333"><strong>pip</strong></span> install requests
</span></span></span></span>

响应

响应的类型

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6"><span style="color:#1f7199">#获取接口返回的字符串数据</span>
r.<span style="color:#333333"><strong>text</strong></span>

<span style="color:#1f7199">#获取接口返回的json数据，即直接将json格式的数据转换为json对象</span>
r.json()

<span style="color:#1f7199">#获取接口返回的二进制数据，假设二进制数据如果为图片可以继续转换成图片</span>
r.content

<span style="color:#1f7199">#获取原始套接字,使用r.raw请在 requests 请求中加上参数 stream=True</span>
r.raw
</span></span></span></span>

获取请求响应的其他信息

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6">#获取状态码
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.status_code</span>

#获取请求的<span style="color:#333333"><strong>url</strong></span>
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.url</span>

#获取指定<span style="color:#333333"><strong>cookies</strong></span>信息
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.cookies</span><span style="color:#bc6060">['token']</span>

#获取访问服务器返回给我们的响应头部信息
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.headers</span>

#获取指定访问服务器返回给我们的响应头部信息
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.headers</span><span style="color:#bc6060">['Content-Type']</span>

#获取发送到服务器的请求的头部的信息
<span style="color:#333333"><strong>r</strong></span><span style="color:#880000">.request</span><span style="color:#880000">.headers</span>
</span></span></span></span>

请求

获取请求

获取请求：

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6"><span style="color:#333333"><strong>res</strong></span> = requests.<span style="color:#397300">get</span>(url,data=data,cookies=cookie,headers=header,verify=False,<span style="color:#333333"><strong>files</strong></span>=<span style="color:#333333"><strong>file</strong></span>)
</span></span></span></span>

data可传可不传，data是字典格式。

如果url是https的话，加上verify=False。如果url是http的话，可不加。

示例1

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6"><span style="color:#333333"><strong>import</strong></span> requests

<span style="color:#333333"><strong>if</strong></span> __name__ == <span style="color:#880000">'__main__'</span>:
    r = requests.<span style="color:#333333"><strong>get</strong></span>(<span style="color:#880000">"https://www.psvmc.cn"</span>)
    <span style="color:#397300">print</span>(r.text)
</span></span></span></span>

示例2

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6"><span style="color:#333333"><strong>import</strong></span> requests

<span style="color:#333333"><strong>if</strong></span> __name__ == <span style="color:#880000">'__main__'</span>:
    data = {<span style="color:#880000">'username'</span>: <span style="color:#880000">'admin'</span>, <span style="color:#880000">'passwd'</span>: <span style="color:#880000">'123456'</span>}
    r = requests.<span style="color:#333333"><strong>get</strong></span>(<span style="color:#880000">"https://www.psvmc.cn/login.json"</span>, params=data)
    <span style="color:#397300">print</span>(r.status_code)
    <span style="color:#397300">print</span>(r.json()[<span style="color:#880000">"obj"</span>])
</span></span></span></span>

POST请求

<span style="color:#333333"><span style="background-color:#fefefe"><span style="color:#444444"><span style="background-color:#f6f6f6">url_post = "https://www.psvmc.cn/login.json"

<span style="color:#888888">#不包含任何参数的请求</span>
r = requests.post(url_post)

<span style="colo