Python3爬取妹子图——爬虫&下载网络图片

最新推荐文章于 2024-04-24 17:30:00 发布

IT黑名单

最新推荐文章于 2024-04-24 17:30:00 发布

阅读量1.7k

点赞数

文章标签：爬虫 python 图片 IT黑名单

本文介绍了一个使用Python编写的简单脚本，该脚本利用BeautifulSoup和urllib等库从指定的图片网站抓取图片资源，并将它们保存到本地。通过解析网页源代码，脚本能够识别出所有.jpg格式的图片链接并进行下载。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

准备工具：

Python 3.4.3

图片网站

import re
import time
from bs4 import BeautifulSoup
from urllib.request import urlopen, urlretrieve

def unzip(data, charset='utf8'):
    import gzip
    return gzip.decompress(data).decode(charset)

def getHtml(url, charset='utf8'):
    print(url)
    resp = urlopen(url)
    encoding = resp.info().get('Content-Encoding')
    if 'gzip' == encoding:
        return unzip(resp.read(), charset)
    return resp.read().decode(charset)

def getImg(url):
    html = getHtml(url)
    soup = BeautifulSoup(html, 'html.parser')
    imgs = soup.findAll(name="img", attrs={"src":re.compile("\.jpg")})
    for img in imgs:
        imgUrl = img['src']
        print(imgUrl)
        urlretrieve(imgUrl, '%s.jpg'%time.time())

def main():
    getImg('http://www.mmjpg.com/')
if __name__=='__main__':
    main()

贴个执行结果图：(逃ing...)