BeautifulSoup爬取墙纸

最新推荐文章于 2025-08-05 17:20:40 发布

原创最新推荐文章于 2025-08-05 17:20:40 发布 · 695 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#python #爬虫

学习同时被 3 个专栏收录

2 篇文章

订阅专栏

爬虫

1 篇文章

订阅专栏

BeautifulSoup

1 篇文章

订阅专栏

该博客展示了如何利用BeautifulSoup库从壁纸网站抓取图片链接。首先设置请求头，然后解析GBK编码的HTML，找到包含壁纸链接的元素。接着遍历每个链接，下载图片，并将其保存为二进制文件。每张图片之间间隔1秒以避免频繁请求。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

BeautifulSoup爬取墙纸

import bs4
import requests
from bs4 import BeautifulSoup
from urllib.parse import urljoin
import time
url = 'https://desk.zol.com.cn/pc/'
headers = {
'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4896.60 Safari/537.36'
}
resp = requests.get(url, headers=headers)
resp.encoding = 'gbk' #观察网页编码，为gbk格式。
page_content = BeautifulSoup(resp.text,"html.parser")
li = page_content.find("ul",attrs={"class":"pic-list2"}).find_all("a")
for a in li:
    href = a.get("href")
    text = a.find("em").text
    if href.endswith(".exe"):
        continue
    href = urljoin(url,href)
    img_result = requests.get(href,headers=headers)
    img_text = img_result.text
    img_page_source = BeautifulSoup(img_text,"html.parser") #html.parser必须加，解析为html
    img_a = img_page_source.find("img",attrs={"id":"bigImg"})
    img_src=img_a.get("src")
    img_url = img_src.split("/")[-1] #取网页背后的编码作为图片名称
    img_resp = requests.get(img_src) #请求图片
    print(img_url)
    with open(img_url,"w") as f:
        f.write(img_resp.content) #图片为二进制
    time.sleep(1)