Python爬虫

最新推荐文章于 2022-04-28 19:00:27 发布

原创最新推荐文章于 2022-04-28 19:00:27 发布 · 219 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#python #爬虫

这是一个使用Python编写的简单爬虫程序，用于从百度图片搜索中批量下载指定关键词的图片。用户可以输入想要爬取的图片名称和数量，程序会自动创建文件夹并保存图片，同时对下载过程中出现的错误进行捕获和处理。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Python爬虫

import requests
import re
import os
import time

headers = {'User-Agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/84.0.4147.125 Safari/537.36'}
name = input('您要爬取什么图片')
num = 0
x = input('您要爬取几张呢?，输入1等于100张图片：')
for i in range(int(x)):
    #新建一个文件用于存储爬取的图片
    name_1 = 'E:\\deeplearn1\\YC'
    url = 'https://image.baidu.com/search/flip?tn=baiduimage&ie=utf-8&word='+name+'&pn='+str(i*50)
    res = requests.get(url,headers=headers)
    htlm_1 = res.content.decode()
    a = re.findall('"objURL":"(.*?)",',htlm_1)
    if not os.path.exists(name_1):
        os.makedirs(name_1)
    for b in a:
        num = num +1
        try:
            img = requests.get(b)
        except Exception as e:
            print('第'+str(num)+'张图片无法下载------------')
            print(str(e))
            continue
        f = open(name+'.'+str(num)+'.jpg','ab')
        print('---------正在下载第'+str(num)+'张图片----------')
        f.write(img.content)
        f.close()
print('下载完成')