Python爬取天堂网图片

最新推荐文章于 2021-09-26 10:53:58 发布

Nicholas_K

最新推荐文章于 2021-09-26 10:53:58 发布

阅读量1.1w

点赞数

分类专栏： python 文章标签：爬虫

本文链接：https://blog.youkuaiyun.com/nicholas_K/article/details/85275793

版权

本文介绍了使用Python进行网络图片爬取的过程，通过运行代码成功创建了一个包含所爬取图片的文件夹。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

运行代码后看到生成了一个文件夹，储存的有照片

# coding=utf-8
# 上节代码追加需求：同一图集图片放入同一文件夹下。
import requests
from lxml import etree
import os

# 风景分类下
# url_list = []
# for i in range(2, 71):
#     url = f'http://www.ivsky.com/tupian/ziranfengguang/index_{i}.html'
#     url_list.append()

# 风景分类/分页列表页
resp = requests.get('http://www.ivsky.com/tupian/ziranfengguang/index_2.html')
if resp.status_code == 200:
    html_content = resp.content.decode()
print(html_content)

# 获取图解列表页每个图集链接
basedir = os.path.dirname(__file__)
html_content = r"""
<!doctype html><html><head><meta charset=utf-8 /><title>自然风光图片 - 自然风景图片_第2页 (天堂图片网)</title><meta name="description" content="自然风光图片 - 自然风景图片," /><meta name="keywords" content="" /><meta http-equiv="X-UA-Compatible" content="IE=edge,chrome=1" /><meta name="renderer" content="webkit" /><meta name="applicable-device" content="pc" /><link rel="alternate" media="only screen and(max-width: 640px)" href="http://m.ivsky.com/tupian/ziranfengguang/index_2.html"><meta name="mobile-agent" content="format=html5; url=http://m.ivsky.com/tupian/ziranfengguang/index_2.html"><link type="text/css" href="/img/a.css" rel="stylesheet" /><script type="text/javascript" src="/img/jq.js"></script><script type="text/javascript" src="/img/a.js"></script></head><body><div id="header"><div class="box"><div id="logo"><a href="http://www.ivsky.com">天堂图片网</a></div><ul id="menu"><li><a href="/">首页</a></li><li><a href="/tupian/">图片大全</a></li><li><a href="/bizhi/">桌面壁纸</a></li></ul><div id="search"><div class="inp"><input type="text" id="ser_inp" class="ser_inp" /></div><div class="inp-btn"><input type="submit" value="" id="ser_btn" class="ser_btn" /></div></div><div id="login"></div></div><div class="hbg"></div></div><div class="box"><div id="alltop"><script>dy("alltop");</script></div><div id="tplisttop1"><script>dy("tplisttop1");</script></div><div id="tplisttop2"><script>dy("tplisttop2");</script></div></div><div class="box"><div class="pos"><a href='http://www.ivsky.com/'>首页</a> > <a href="/tupian/">图片大全</a> > <a href="/tupian/ziranfengguang/index_2.html">自然风光图片 - 自然风景图片</a> / 第2页</div><div class="left"><div class="sort"><ul class="tpmenu"><li class="s1"><a href="/tupian/" title="图片大全 - 唯美图片 - 好看的图片">所有图片</a></li><li class="s2on active"><a href="/tupian/ziranfengguang/" title="自然风光图片 - 自然风景图片">自然风光</a></li><li class="s3"><a href="/tupian/chengshilvyou/" title="城市旅游图片 - 世界各国城市图片">城市旅游</a></li><li class="s4"><a href="/tupian/dongwutupian/" title="动物图片 - 宠物图片 - 野生动物图片">动物图片</a></li><li class="s5"><a href="/tupian/zhiwuhuahui/" title="植物花卉图片 - 花图片 - 花草图片 - 植物图片">植物花卉</a></li><li class="s6"><a href="/tupian/haiyangshijie/" title="海洋世界 - 海洋风光图片 - 海底世界图片">海洋世界</a></li><li class="s7"><a href="/tupian/renwutupian/" title="人物图片 - 人物图片大全">人物图片</a></li><li class="s8"><a href="/tupian/meishishijie/" title="美食图片 - 国外美食甜点图片 - 中国传统美食小吃图片">美食世界</a></li><li class="s9"><a href="/tupian/wupin/" title="物品物件大全 - 生活用品 - 学习用品图片">物品物件</a></li><li class="s10"><a href="/tupian/yundongtiyu/" title="运动图片 - 体育、休闲、竞赛图片">运动体育</a></li><li class="s11"><a href="/tupian/jiaotongyunshu/" title="公路铁路运输 - 桥梁码头图片 - 车船飞机图片">交通运输</a></li><li class="s12"><a href="/tupian/jianzhuhuanjing/" title="世界著名建筑 - 各国建筑图片 - 建筑环境图片">建筑环境</a></li><li class="s13"><a href="/tupian/jiaju/" title="家居装饰设计图片 - 装修效果图 - 时尚家居图片">装饰装修</a></li><li class="s14"><a href="/tupian/guanggaosheji/" title="品牌广告设计 - 广告设计创意图片">广告设计</a></li><li class="s15"><a href="/tupian/katongtupian/" title="卡通插画图片 - 卡通人物形象、卡通风景图片">卡通图片</a></li><li class="s16"><a href="/tupian/jieritupian/" title="中国传统节日图片 - 国外知名节日图片">节日图片</a></li><li class="s17"><a href="/tupian/shejisucai/" title="设计素材图片 - 背景图片 - 花纹、底纹、边框素材图片">设计素材</a></li><li class="s18"><a href="/tupian/yishu/" title="艺术 - 绘画 - 民族艺术">艺术绘画</a></li>&

最低0.47元/天解锁文章