urllib批量下载百度图片

最新推荐文章于 2024-08-14 10:44:52 发布

韩淼燃

最新推荐文章于 2024-08-14 10:44:52 发布

阅读量458

点赞数

分类专栏： python怕虫项目课程文章标签： urllib

本文链接：https://blog.youkuaiyun.com/weixin_36691991/article/details/89048506

版权

python怕虫项目课程专栏收录该内容

18 篇文章 ¥39.90 ¥99.00

订阅专栏

超级会员免费看

本文将介绍如何利用Python的urllib库实现批量下载百度图片的步骤，包括设置搜索参数、请求网页、解析HTML获取图片链接以及保存图片到本地。通过这个教程，你将学会一种基本的网络爬虫技巧。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

'''
urllib批量下载百度图片
'''
import urllib.request
import re
start_url = 'http://image.baidu.com/search/index?tn=baiduimage&word=dahuaxiyou'
res = urllib.request.urlopen(start_url).read().decode()
image_urls = re.findall(r'"thumbURL":"(.*?)"',res,re.S)
def save_img(url):
    file_path = url.split('/')[-1]
    headers = {
        "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/70.0.3538.110 Safari/537.36",
        "Referer":start_url,
    }
    rep = urllib.request.Request(url,headers=headers)
    res = urllib.request.urlopen(rep).read()
    with open(file_path,'wb') as f:
        f.write(res)
for image_url in image_urls:
    save_img(image_url)