python爬虫之修改报头，模拟浏览器（build.opener()、add_header()）

最新推荐文章于 2025-10-16 10:20:04 发布

原创最新推荐文章于 2025-10-16 10:20:04 发布 · 5k 阅读

8 ·

CC 4.0 BY-SA版权

文章标签：

#python

Python 专栏收录该内容

3 篇文章

订阅专栏

本文介绍如何在浏览器中查看User-Agent信息，并提供两种Python方法来修改请求头部的User-Agent，包括使用build.opener()和add_header()函数。

获取User-Agent：
用浏览器打开任意页面，按一下F12，点击Network即可找到User-Agent对应信息

1、使用build.opener()修改报头

headers=("User-Agent",“Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36”)
opener=urllib.request.build_opener()
opener.addheaders=[headers]
data=opener.open(url).read()

2、使用add_header()添加报头

header="Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36"
req=urllib.request.Request(url)
req.add_header('User-Agent',header)
data=urllib.request.urlopen(req).read()