Python3抓取网页图片

Hades_Dev

于 2017-01-26 14:13:05 发布

阅读量1k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： Python库文章标签： python

本文链接：https://blog.youkuaiyun.com/mayuko2012/article/details/54744062

Python库专栏收录该内容

8 篇文章

订阅专栏

本文介绍了一个使用Python编写的简单脚本，该脚本可以从指定的网页上抓取所有图片链接，并将其下载到本地目录中。通过正则表达式匹配图片URL，利用urllib库完成下载任务。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

# -*- coding: utf-8 -*-
# @Author: Mayuko
# @Date:   2017-01-24 15:09:23
# @Last Modified by:   Mayuko
# @Last Modified time: 2017-01-26 14:09:06
import urllib.request
import socket
import re
import sys
import os
import math
targetDir = r"D:\images"


def destFile(path):
    if not os.path.isdir(targetDir):
        os.mkdir(targetDir)
    pos = path.rindex('/')
    t = os.path.join(targetDir, path[pos + 1:])
    return t

if __name__ == "__main__":
        hostname = "http://vscom.mayuko.cn/"
        req = urllib.request.Request(hostname)
        webpage = urllib.request.urlopen(req)
        contentBytes = webpage.read()
        for link, t in set(re.findall(r'(http://[^\s]*?(jpg))', str(contentBytes))):
            print("Cache the images of " + link)
            urllib.request.urlretrieve(link, destFile(link))

print("Cache done")