urlretrieve（）函数下载图片

最新推荐文章于 2023-03-01 11:20:19 发布

weixin_33738578

最新推荐文章于 2023-03-01 11:20:19 发布

阅读量754

点赞数

CC 4.0 BY-SA版权

文章标签：操作系统

原文链接：http://www.cnblogs.com/wanglinjie/p/9250531.html

本文介绍了一种从天堂图片网抓取图片的方法，利用Python的requests库获取网页内容，结合lxml解析HTML并提取img标签中的src属性，再通过urlretrieve函数下载图片，同时显示下载进度。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

天堂图片网下载，将img标签中的src属性提取出来，交给

urllib.request.urlretrieve函数【urllib.urlretrieve（python2中）】自动回调Schedule函数，显示当前下载进度，

Schedule包含3个参数

     blocknum:已经下载的数据块
     blocksize:数据块的大小
     totalsize:远程文件的大小

 1 import urllib.request
 2 from lxml import etree
 3 import requests
 4 def Schedule(blocknum,blocksize,totalsize):
 5     '''''
 6     blocknum:已经下载的数据块
 7     blocksize:数据块的大小
 8     totalsize:远程文件的大小
 9     '''
10     per = 100.0 * blocknum * blocksize / totalsize
11     if per > 100 :
12         per = 100
13     print('当前下载进度：%d'%per)
14 user_agent = 'Mozilla/4.0 (compatible; MSIE 5.5; Windows NT)'
15 headers={'User-Agent':'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_3) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/58.0.3029.110 Safari/537.36'}
16 r = requests.get('http://www.ivsky.com/tupian/ziranfengguang/',headers=headers)
17 #使用lxml解析网页
18 html = etree.HTML(r.text)
19 img_urls = html.xpath('.//img/@src')#先找到所有的img
20 i=0
21 for img_url in img_urls:
22     urllib.request.urlretrieve(img_url,'img'+str(i)+'.jpg',Schedule)
23     i+=1