python爬虫爬取图片必应&百度（仅供学习）

最新推荐文章于 2025-05-21 16:35:50 发布

爱吃香蕉的阿豪

最新推荐文章于 2025-05-21 16:35:50 发布

阅读量1.6k

点赞数 4

CC 4.0 BY-SA版权

分类专栏： python人工智能文章标签： python 网络爬虫 beautifulsoup

本文链接：https://blog.youkuaiyun.com/weixin_65243968/article/details/136127045

python人工智能专栏收录该内容

9 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍了如何使用Python编写脚本来从必应和百度搜索结果中爬取图片，包括使用requests和BeautifulSoup库进行网络请求和解析HTML，以及处理可能出现的反爬机制，如设置User-Agent和Cookie。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

简介

分别在必应和百度中爬取图片的代码，只需要将搜索关键字改成你需要爬取的关键字即可复用

在必应中爬取图片

话不多说，先上代码

import requests
from bs4 import BeautifulSoup
import os

def get_image_urls(query, num_images,j):
    url = f"https://www.bing.com/images/async?q={query}&first={j}&count={num_images}"
    response = requests.get(url)
    soup = BeautifulSoup(response.text, "html.parser")
    image_tags = soup.find_all("img", class_="mimg")
    filtered_image_tags = [img for img in image_tags if "vimgld" not in img["class"]]
    image_urls = [img["src"] for img in filtered_image_tags]
    return image_urls

def download_images(image_urls, save_dir,j):
    if not os.path.exists(save_dir):
        os.makedirs(save_dir)

    for i, url in enumerate(image_urls):