python爬取某网站上的图片

梦里逆天

已于 2022-07-15 10:42:24 修改

阅读量1k

点赞数

分类专栏： Python 文章标签： python 爬虫图片

于 2022-07-15 09:28:14 首次发布

本文链接：https://blog.youkuaiyun.com/username666/article/details/125797079

版权

本文介绍了如何使用Python爬虫请求网页，解析HTML，提取图片链接，并将图片保存到本地。通过爬取过程，展示了完整的爬虫代码实现。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.请求网页

import requests


# 请求头，对python爬虫进行伪装
# user-agent：浏览器的身份标识
headers = {
   
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36'
}
# 由于vmgirls这个网站打开开发者工具会自动退出，可以在网址url前加“view-source:”，如：view-source:https://www.vmgirls.com/12985.html查看网页源代码
# 1.请求网页
response = requests.get('https://www.vmgirls.com/12985.html', headers=headers)
html = response.text
print(html)

在这里插入图片描述

2.解析网页，提取我们需要的数据

我们想要的是网页上的图片链接。
在这里插入图片描述

# 2.解析网页
# 使用正则表达式匹配网页文本中满足特定条件的内容
urls = re.findall('<a rel="nofollow" href="(.*?)" alt=".*?">', html)
print(urls)

在这里插入图片描述

3.保存数据

最低0.47元/天解锁文章