python基础编程：python爬虫 urllib模块发起post请求过程解析

最新推荐文章于 2025-05-22 07:19:05 发布
原创 最新推荐文章于 2025-05-22 07:19:05 发布 · 669 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#编程语言 #python

本文详细解析了使用Python的urllib模块发起POST请求的过程，包括如何找到POST请求的URL、处理请求参数及解码翻译结果。通过实例展示了在百度翻译中抓取POST请求并进行AJAX操作的步骤。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

这篇文章主要介绍了python爬虫 urllib模块发起post请求过程解析,文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下
urllib模块发起的POST请求

案例：爬取百度翻译的翻译结果
1.通过浏览器捉包工具，找到POST请求的url
针对ajax页面请求的所对应url获取，需要用到浏览器的捉包工具。查看百度翻译针对某个字条发送ajax请求，所对应的url

点击clear按钮可以把抓包工具，所抓到请求清空
在这里插入图片描述
然后填上翻译字条发送ajax请求，红色框住的都是发送的ajax请求在这里插入图片描述
抓包工具All按钮代表 显示抓到的所有请求 ，包括GET、POST请求 、基于ajax的POST请求
XHR代表 只显示抓到的基于ajax的POST请求在这里插入图片描述
哪个才是我们所要的基于ajax的POST请求，这个POST请求是携带翻译字条的苹果请求参数在这里插入图片描述
再看看这个POST请求 对应的请求URL ，这个URL是我们要请求的URL在这里插入图片描述

最低0.47元/天 解锁文章

200万优质内容无限畅学
Python常用模块 之 urllib&&urllib3 【爬虫库】
孤寒者的博客
09-15 10万+
Python常用模块 之 urllib&&urllib3 【爬虫库】
使用urllib与urllib包实现GET与POST方法请求(interfaceDriver.py)
WEL测试
11-06 853
interfaceDriver.py 该脚本提供的接口是为代理获取的数据包做准备，与常规的get与post方法不一样！之前的博客有些GET与POST的请求python脚本： #coding=utf8 ''' 作者:ewang 版本号：V1.0 日期：2017/11/06 描述: 该模块是用来与代理结合，来进行接口测试的代码模块。 使用GET与POST方法进行http请求，该模块主要包包含如下方
Python爬虫-urllib-post请求
Asura_____的博客
03-07 4939
浅试一下百度翻译。👀️
爬虫入门（urllib与requests）
最新发布
weixin_42522131的博客
05-22 301
除了requests模块可以发送请求之外, urllib模块也可以实现请求的发送,只是操作方法略有不同!urllib在python中分为urllib和urllib2，在python3中为urllib下面以python3的urllib为例进行讲解构造简单请求#构造请求#发送请求获取响应传入headers参数#构造headersMSIE 9.0;#构造请求#发送请求传入data参数 实现发送post请求（示例）data = {'q': 'lucky 是一个帅气的老'# 使用post方式。
python urllib发送post请求_python爬虫 urllib模块发起post请求过程解析
weixin_39593523的博客
02-19 2237
urllib模块发起的POST请求案例：爬取百度翻译的翻译结果1.通过浏览器捉包工具，找到POST请求的url针对ajax页面请求的所对应url获取，需要用到浏览器的捉包工具。查看百度翻译针对某个字条发送ajax请求，所对应的url点击clear按钮可以把抓包工具，所抓到请求清空然后填上翻译字条发送ajax请求，红色框住的都是发送的ajax请求抓包工具All按钮代表 显示抓到的所有请求 ，包括GE...
python爬虫(五)_urllib2:Get请求和Post请求
weixin_30687811的博客
11-15 297
本篇将介绍urllib2的Get和Post方法，更多内容请参考:python学习指南 urllib2默认只支持HTTP/HTTPS的GET和POST方法 urllib.urlencode() urllib和urllib2都是接受URL请求的相关参数，但是提供了不同的功能。两个最显著的不同如下： urllib仅可以接受URL，不能创建设置了headers的Request类实例； 但是urll...
python使用urllib发送post请求_使用urllib发送post请求
weixin_35027153的博客
01-14 1889
使用python移动飞信模块发送短信作者：miaoo1.应用场景由于自己做的一个系统需要用到发送短信到自己手机的功能，于是搜索了一下，发现了一个通过移动飞信通道发送短信开源库：PyFetionPyFetion 模拟实现了飞信的通信协议，所以能够实现的功能非常多：短信收发、好友管理、修改状态等等等。但是，由于我只需要发送短...文章方倍工作室2012-07-201009浏览量《Python爬虫开发与...
python爬虫 urllib模块发起post请求过程解析
09-18
这个过程对于理解和实践Python爬虫中的POST请求至关重要，也是爬虫开发中的一项基础技能。在实际应用中，可能需要处理更复杂的请求头、cookies等，但基本的POST请求步骤是相似的。希望这个例子能帮助你更好地理解...
python urllib发送post请求_Python – 使用Python 3 urllib发出POST请求
weixin_39617113的博客
12-03 669
我正在尝试向以下页面发出POST请求：http://search.cpsa.ca/PhysicianSearch为了模拟单击“搜索”按钮而不填写任何表单,这会向页面添加数据.通过在查看chrome developer工具中的网络选项卡时单击按钮,我获得了POST标头信息.我发布这个而不是仅仅从其他类似问题复制解决方案的原因是我相信我可能没有得到正确的标题信息.格式是否正确,我是否抓住了正确的信息？...
python使用urllib发送post请求_使用Python3.4和urllib向AJAX发送POST请求
weixin_35860804的博客
02-03 242
我需要重复使用提供的日历的每个季节和每周：当我检查网络以查看发送的内容时，当我更改季节时，我会看到两个POST请求：(我把上面的3张图片合并成1张，因为我没有足够的重复次数来发布一张以上的图片)我一整天都在搜索、阅读和删减它，但没有任何进展。我可以通过使用Firebug编辑和重新发送post请求来重新创建我遇到的错误，如果我将有效负载编辑为意外的话。所以我觉得问题出在我编码和发送数据的方式上。我试...
urllib 中的post请求
weixin_30394633的博客
06-04 972
import urllib.requestimport urllib.parse url = 'http://fanyi.baidu.com/v2transapi' word = 'meizi' formdata = { 'from' : 'en', 'to' : 'zh', 'query':word, 'transtype':'realtime', 'simple_means_flag' ...
4.urllib-Post请求
小白的博客
10-26 346
pose请求数据 url = "https://fanyi.baidu.com/sug" data = { "kw": 'spider' } data = urllib.parse.urlencode(data).encode("utf8") request = urllib.request.Request(url=url, data=data, headers=headers) response = urllib.request.urlopen(request) print(response.re
python使用urllib发送post请求_使用urllib发出post请求
weixin_39589241的博客
01-14 480
我正在尝试对API提供程序提出请求curl "https://api.infermedica.com/dev/parse" \-X "POST" \-H "App_Id: 4c177c" -H "App_Key: 6852599182ba85d70066986ca2b3" \-H "Content-Type: application/json" \-d '{"text": "i feel smoa...
Python代码示例：使用urllib.request库发送post请求并使用urlencode函数转换参数为字节串
学亮编程手记
06-18 680
如果使用Python自带的标准库来发送POST请求，那么可以使用。函数将数据字典转换为URL编码的字符串，并将其编码为字节串，因为。模块，然后定义了要发送POST请求的URL和请求数据。方法发送请求并获取响应。最后，读取并打印了响应的内容。对象要求数据是字节类型。对象并指定了请求方法为POST，接着使用。
Python爬虫urllib发送post请求
yqqの博客
02-28 923
POST请求的参数需要放到Request请求对象中，data是一个字典，里面要匹配键值对。在目前网络获取数据的方式有多种方式：POST。
python urllib post_python爬虫第1章 urllib库（二） urllib发送post请求
weixin_30877689的博客
03-01 664
python爬虫第1章 urllib库(二) urllib发送post请求一、构建请求对象Request先看看python urllib默认的请求头：import urllib.requesturl = r"http://www.baidu.com"response = urllib.request.urlopen(url)print(response.read())执行上面代码，使用Charle...
使用py3.6 urllib 库进行POST
sinat_39013092的博客
04-28 274
首先导入 # coding=utf-8 import urllib.parse import urllib.request class NeiRong(): """ 使用对象进行POST数据的封装 """ def __init__(self, resto, content, **dictArg): """ resto是回复的串 ...
【python】【爬虫】urllib爬虫模拟POST请求
BananaChoas的博客
06-11 380
有些网站的登录使用表单form向服务器提交POST请求的方式实现登录，但现在更常见的是把登录放在js文件中，需要抓包获取js文件进行分析。以下为简单的form表单实现登录，关注其中input的name属性对应的值。 <body> <form action="" method="post"> 姓名：<input name="name" type="text"/><br> 密码：<input name="pass" type="text"
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值