urllib3批量下载百度图片

最新推荐文章于 2024-04-18 15:29:02 发布

韩淼燃

最新推荐文章于 2024-04-18 15:29:02 发布

阅读量1k

点赞数

CC 4.0 BY-SA版权

分类专栏： python怕虫项目课程文章标签： urllib3

本文链接：https://blog.youkuaiyun.com/weixin_36691991/article/details/89048319

python怕虫项目课程专栏收录该内容

18 篇文章 ¥39.90 ¥99.00

订阅专栏

超级会员免费看

本文详细介绍了如何利用Python的urllib3库进行批量下载百度图片的步骤，包括设置请求头、搜索参数、解析HTML获取图片链接，以及实际的下载过程，帮助读者掌握网络爬虫的基本技巧。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

'''
urllib3批量下载百度图片
'''
import urllib3
import re
start_url = 'http://image.baidu.com/search/index?tn=baiduimage&word=dahuaxiyou'
http = urllib3.PoolManager()
res = http.request('get',start_url).data.decode()
image_urls = re.findall(r'"thumbURL":"(.*?)"',res,re.S)
def save_img(url):
    file_path = url.split('/')[-1]
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36",
        "Referer":start_url,
    }
    res = http.request('get',url,headers=headers).data
    with open(file_path,'wb') as f:
        f.write(res)
for image_url in image_urls:
    save_img(image_url)