Python爬虫抓取网页图片

最新推荐文章于 2025-11-07 05:15:00 发布

原创

最新推荐文章于 2025-11-07 05:15:00 发布 · 1.9w 阅读

32 ·

CC 4.0 BY-SA版权

文章标签：

#爬虫 #python #图片 #抓取

本文介绍了如何使用Python实现爬虫抓取网页图片，主要利用urllib模块的urlretrieve()方法，可指定本地保存路径，并能通过回调函数展示下载进度。

本文通过python 来实现这样一个简单的爬虫功能，把我们想要的图片爬取到本地。

下面就看看如何使用python来实现这样一个功能。

# -*- coding: utf-8 -*-
import urllib
import re
import time
import os

#显示下载进度
def schedule(a,b,c):
    '''''
    a:已经下载的数据块
    b:数据块的大小
    c:远程文件的大小
   '''
    per = 100.0 * a * b / c
    if per > 100 :
        per = 100
    print '%.2f%%' % per

def getHtml(url):
    page = urllib.urlopen(url)
    html = page.read()
    return html

def downloadImg(html):
    reg = r'src="(.+?\.jpg)" pic_ext'
    imgre =