- 第一步是要import该函数
for urllib import request
2.第二步确定你的目标网站
url = "baidu.com"
3.寻找用户代理User-Agent,用以模拟正常访问
header = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/107.0.0.0 Safari/537.36 Edg/107.0.1418.56"
4.三步确定既可以使用Request方法将url和headers组合起来,并且Request方法(url,data,headers)是包含三个参数的,有data的为post请求,无为get请求。
rq = request.Request(url,headers=header)
5.当请求对象rq构造好后,使用urlopen发送这个请求对象就可以了
res = request.urlopen(rq)
最后完整的代码演示
url = "baidu.com"
headers = "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/107.0.0.0 Safari/537.36 Edg/107.0.1418.56"
rq = request.Request(url,header=headers)
res = request.urlopen(rq)