用Python下载煎蛋网全站好看的小姐姐!

python 爬虫爬取煎蛋网妹子图,我1T的硬盘装满了! 前言 大家好,这里是「brucepk」爬虫 系列教程。此系列教程以实例项目为材料进行分析,从项目中学习 python 爬虫,跟着我一起学习,每天进步一点点。 煎蛋网站 image 很多朋友都反应学 python 语言太枯燥,学不进去,其实学语言最好的方法是自己用所学的语言做项目,在项目中学习语言的用法。今天给大家带来的项目是用 python3 爬取煎蛋网妹子的图片。图片质量还不错,我放... 阅读详情

d916494a47a608819fac85386cfb2e37.png

转载来自:Python技术

春天到了,春光明媚,鸟语花香,各地都回温了!公园里面的花都开了,这几天都没有心情工作,准备周末出去游山玩水,踏踏青!先用Python爬取一波妹子图,摸摸鱼吧。

导入模块

首先把用到的模块贴进来。

import requests
from bs4 import BeautifulSoup
import time
import random

抓取

煎蛋网的抓取流程:从第 101 页开始抓取,提取页面上的女装图片 url,请求 url 后保存图片,点击下一页,重复循环...。

当访问煎蛋网的 http://jandan.net/girl 页面的时候,它是显示的最后一页。通过上面的分页控件获取下一页的 url。

66ee12844e74db8fb42609691dcda7d2.png
headers = {
    'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/97.0.4692.99 Safari/537.36'
}

def get_html(url):
    
    resp = requests.get(url = url, headers = headers)
    soup = BeautifulSoup(resp.text)
    return soup

def get_next_page(soup):
    next_page = soup.find(class_='previous-comment-page')
    next_page_href = next_page.get('href')
    return f'http:{next_page_href}'

可以看到每个图片上都有[查看原图] 的超链接,提取这个 href 就是可以下载图片了。

2043285a02ec98c51e4f498d7ff64451.png
def get_img_url(soup):
    a_list = soup.find_all(class_ = 'view_img_link')
    urls = []
    for a in a_list:
        href = 'http:' + a.get('href')
        urls.append(href)
    return urls

保存图片就更简单了,request 请求后直接写入文件。

def save_image(urls):
    for item in urls:
        name = item.split('/')[-1]
        resp = requests.get(url=item, headers = headers)
        with open('D:/xxoo/' + name, 'wb') as f:
            f.write(resp.content)
        time.sleep(random.randint(2,5))

最后来看一下抓取结果吧。

b8fefc0447d3ebe212ca79161d55619c.png

总结

这篇 request 爬虫适合刚入 python 和没学过 soup 模块的小伙伴。有兴趣的小伙伴,可以动手敲一下代码。看百遍,读千边,不如动手敲一边。学习Python一定要动手操作,实战才行。

有兴趣的同学可以火速加入我们的星球

3周零基础入门提供10节课程

全年12节趣味实战项目含源码,

每月奖励优秀的Top3同学送书

专业的答疑群,大厂的老师保姆式的教学

如果不满意,三天内随意退款!一年88,现在优惠16元

9c070fc40ab8ae70c6708cafd370d7c7.png

扫码加入,3周零基础入门

推荐阅读:
入门: 最全的零基础学Python的问题  | 零基础学了8个月的Python  | 实战项目 |学Python就是这条捷径
干货:爬取豆瓣短评,电影《后来的我们》 | 38年NBA最佳球员分析 |   从万众期待到口碑扑街!唐探3令人失望  | 笑看新倚天屠龙记 | 灯谜答题王 |用Python做个海量小姐姐素描图 |碟中谍这么火,我用机器学习做个迷你推荐系统电影
趣味:弹球游戏  | 九宫格  | 漂亮的花 | 两百行Python《天天酷跑》游戏!
AI: 会做诗的机器人 | 给图片上色 | 预测收入 | 碟中谍这么火,我用机器学习做个迷你推荐系统电影
小工具: Pdf转Word,轻松搞定表格和水印! | 一键把html网页保存为pdf!|  再见PDF提取收费! | 用90行代码打造最强PDF转换器,word、PPT、excel、markdown、html一键转换 | 制作一款钉钉低价机票提示器! |60行代码做了一个语音壁纸切换器天天看小姐姐!|

年度爆款文案

点阅读原文,看200个Python案例!

[Python] -项目实战10- 用 Python 自动化批量重命名文件 本文介绍了使用Python实现文件批量重命名的技术方法。主要内容包括:1)使用os和pathlib模块进行基础文件操作;2)提供多种实用脚本示例,如添加序号、替换字符、添加时间戳等;3)进阶功能包括用户输入和错误处理;4)GUI工具实现方案;5)常见问题与优化建议。文章详细讲解了从简单到复杂的批量重命名实现方法,帮助读者快速掌握这一提高工作效率的技能。建议开发者注意路径处理、错误管理等细节,确保脚本稳健运行。 阅读详情

相关推荐

C语言获取硬件信息(CPU序列号,硬盘序列号,网卡IP、MAC地址、是否插入网线)

本文主要介绍Linux和Windows下使用C语言获取各种硬件信息,包括CPU序列号、硬盘序列号、网卡信息(包括网卡名字、IP地址、MAC地址、网卡是否插入网线等)。

叶落花枯的博客 9381

爬取煎蛋网妹子图

煎蛋网妹子图网址:'http://jandan.net/ooxx/' 版本:python 3.x 需要自己去下载配置selenium。   # -*- coding: utf-8 -*- import os import requests from selenium.webdriver.support.wait import WebDriverWait from selenium imp...

BUG-DEV 2647

Java 处理地理信息数据[DEM TIF文件数据获取高程]

EPSG 是一个国际标准,用于唯一标识地理坐标系和投影坐标系。

两点 1283

用Python下载煎蛋网全站好看的姐妹的照片

春天到了,春光明媚,鸟语花香,各地都回温了!公园里面的花都开了,这几天都没有心情工作,准备周末出去游山玩水,踏踏青!先用Python爬取一波妹子图,摸摸鱼吧。 导入模块 首先把用到的模块贴进来。 import requests from bs4 import BeautifulSoup import time import random 抓取 煎蛋网的抓取流程:从第 101 页开始抓取,提取页面上的女装图片 url,请求 url 后保存图片,点击下一页,重复循环…。 当访问煎蛋网的 http://jand

m0_59236548的博客 1万+

性能测试软件(LR12) 具体汉化(中文)方法

LoadRunner 12 的下载及安装详细过程请参考:https://blog.youkuaiyun.com/xiao66guo/article/details/105465854 1、在LoadRunner文件中找到 Setup.exe 可执行文件,并以管理员的身份运行: C盘 —> Temp—>HP LoadRunner 12.02 Community Edition—> D...

多谢大人光临寒舍,请随便看看,喝口茶吧 ☕️☕️☕️ 1993

5分钟快速搭建:使用ros1_bridge实现ROS2容器与ROS1主机的无缝通信

本文详细介绍了如何在5分钟内快速搭建基于ros1_bridge的通信方案,实现运行在Docker容器中的ROS2节点与宿主机ROS1系统的无缝数据交换。通过环境隔离、Docker容器化部署及选择性桥接配置,该方案能有效整合新旧系统,避免大规模代码重构,是机器人项目渐进式升级的实用策略。

weixin_29268637的博客 181

Python爬虫(6):煎蛋网全站妹子图爬虫

Python爬虫(6):煎蛋网全站妹子图爬虫上一篇文章中我们抓取了豆瓣图书的数据,如果大家运行成功,并且看到文件夹下的 txt 文件了。是不是有一种刚接触编程,第一次输出Hello world!时的欣喜。和上一篇实践不同,我们这一次来爬取 煎蛋网 全站妹子图,并且保存到指定文件夹下。爬取流程从煎蛋网妹子图第一页开始抓取;爬取分页标签获得最后一页数字;根据最后一页页数,获得所有页URL;迭代所有页,...

hzp666的博客 1万+

【3天快速入门WPF】1-从最简单的xaml开始

首先我们要知道xaml语法中声明即定义,意思就是“见到元素就相当于创建实例”,MainWindow.xaml的主干是一个元素里包含着一个 元素。这段程序就是在定义一个Window类的实例,这个实例的一个组成部分是一个Grid类的实例。

Zy100Papa的博客 1625

Python爬虫 煎蛋网全站妹子图爬虫

爬取流程 从煎蛋网妹子图第一页开始抓取; 爬取分页标签获得最后一页数字; 根据最后一页页数,获得所有页URL; 迭代所有页,对页面所有妹子图片url进行抓取;访问图片URL并且保存图片到文件夹。 开始 通过上一篇文章的爬取过程,我们基本上理解了抓取一个网站的大致流程。因为一个网站虽然有很多页,但是大部分网站每一页的HTML标签内容都是相同的。我们只要获取到一页的内容,就可以获得所有页的内...

qq_40417296的博客 5952

vscode配置matlab工作环境

前面有两篇文章我们分别讲了在vscode里面如何配置C语言环境和python环境,那两篇文章总体来说比较复杂,当然这篇也有许多有趣的问题。 附上链接: 文章目录matlab简介基本要求code runner插件与matlab相关的插件添加路径小结code runner是否支持更多语言更多选择另一个选择 matlab简介 MATLAB是美国MathWorks公司出品的商业数学软件,用于数据分析、无线通信、深度学习、图像处理与计算机视觉、信号处理、量化金融与风险管理、机器人,控制系统等领域。 MATLAB是ma

Cachel Wood的博客 4543

基于STM32设计的自动追光系统(项目资料ID:2)

基于STM32设计的自动追光系统主要由光敏采集电路、单片机核心板电路和步进电机控制电路构成。通过光敏电阻采集环境光强信息,经 STM32 单片机处理后,控制步进电机转动,实现对光源的自动追踪。该系统具有响应速度快、追踪精度较高等优点,可应用于太阳能发电、智能照明等领域,为相关场景提供高效的光资源利用方案。

以培养嵌入式工程师为己任 1万+

用Python下载煎蛋网全站好看的小姐姐!(1),讲的真透彻

不知道你们用的什么环境,我一般都是用的Python3.6环境和pycharm解释器,没有软件,或者没有资料,没人解答问题,都可以免费领取(包括今天的代码),过几天我还会做个视频教程出来,有需要也可以领取~给大家准备的学习资料包括但不限于:Python 环境、pycharm编辑器/永久激活/翻译插件python 零基础视频教程Python 界面开发实战教程Python 爬虫实战教程Python 数据分析实战教程python 游戏开发实战教程Python 电子书100本。

2401_83620927的博客 868

pscad IEEE标准系统搭建说明

pscad IEEE标准系统搭建说明,包含典型的IEEE 9节点、14节点、30节点、39节点和118节点系统。内含标准测试系统的原始数据和潮流结果。

用Python下载煎蛋网全站好看的小姐姐!,Python面试必刷的200道真题

我们在看视频学习的时候,不能光动眼动脑不动手,比较科学的学习方法是在理解之后运用它们,这时候练手项目就很适合了,只是里面的项目比较多,水平也是参差不齐,大家可以挑自己能做的项目去练练。这是我花了几天的时间去把Python所有方向的技术点做的整理,形成各个领域的知识点汇总,它的用处就在于,你可以按照上面的知识点去找对应的学习资源,保证自己学得较为全面。煎蛋网的抓取流程:从第 101 页开始抓取,提取页面上的女装图片 url,请求 url 后保存图片,点击下一页,重复循环…页面的时候,它是显示的最后一页。

2401_83620959的博客 558

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

Python爬取煎蛋网的妹子图

煎蛋网其中有一个版面,全是好看的小姐姐。本着美女是学习的第一动力的原则,写个程序把小姐姐们都下载下来。 URL:http://jiandan.net/ooxx 程序结构 分析目标网页 提取目标信息 将图片写入文件夹 程序结构 程序主要由一下四个函数构成 def get_html(url) def download(html) def write_to...

_IsWdZh 4718

老版QQ原生表情gif动态

这是老版的QQ表情,不过全是动态的的,Windows照片查看器是不会动的,可以右击用浏览器打开查看,再说一遍是老版的,只是分享给宁愿用老版也要动态的人。

python来爬取煎蛋网随手拍小姐姐图片

前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 作者:程序员喧啸 本文使用了requests模块进行发送请求,使用了BeautifulSoup模块对网页进行解析,在使用之前首先安装这两个第三方库;方法如下: 1. 安装requests库 pipinstallrequests 2. 安装bs4库 pipinstallbs4 PS:如有需要Python学习资料的小伙伴可以加下方的群去找免费管理员领取 ...

Python案例分享,B站视频教程:https://space.bilibili.com/523606542 809

听说煎蛋网随手拍都是漂亮的小姐姐,今天就用python来爬取这些图片噢!!

听说煎蛋网随手拍都是漂亮的小姐姐,今天就用python来爬取这些图片噢!! ​ 本文使用了requests模块进行发送请求,使用了BeautifulSoup模块对网页进行解析,在使用之前首先安装这两个第三方库;方法如下: 安装requests库 pip install requests 安装bs4库 pip install bs4 话不多说,直接开始代码操作!!! 1. 首先 我们打开煎蛋网,看到了首页上面有信息—随手拍,而我们的主要任务就是爬取随手拍的图片将其进行保存。 忘了说,网址是

qq_42372829的博客 536

Python爬虫煎蛋网漂亮小姐姐

此文首发于公众号「Python知识圈」,欢迎直接去公众号看前言大家好,这里是「Python知识圈」爬虫 系列教程。此文首发于「Python知识圈」公众号,欢迎大家去关注。此系列教程以实例项目为材料进行分析,从项目中学习 python 爬虫,跟着我一起学习,每天进步一点点。煎蛋网站​煎蛋网.png很多朋友都反应学 python 语言太枯燥,学不进去,其实学语言最好的方法是自己用所学的语言做项目,在项...

weixin_33858249的博客 205

煎蛋网图片爬虫

最近在看小甲鱼的爬虫视频,试着自己写了一下: from urllib import request import os import re from urllib.request import urlretrieve #import Requests def get_picaddress(html,fold,i): img_list = re.findall(r'src="(//....

weixin_44056331的博客 598

python爬虫--漂亮小姐姐的照片

网址:煎蛋随手拍 函数库:requests bs4 lxml(这几个是需要你pip) 声明:爬取的图片仅供学习 不做其他用途!! 一 :找到图片的连接 进入网站以后你会看到有80页的图片,然后我们检查网页源代码,通过查找我们很容易就能找到链接的位置 通过下面的代码把图片的链接保存到list里面。 def get_content_page(html): try: soup = BeautifulSoup(html,"lxml") div = soup.

weixin_43788143的博客 914

python和人工智能爬虫_Python爬虫抓取用并人工智能分析绝世美颜小姐姐,\"硬盘已满\"...

很多朋友都反应学 python 语言太枯燥,学不进去,其实学语言最好的方法是自己用所学的语言做项目,在项目中学习语言的用法。今天给大家带来的项目是用 python3 爬取煎蛋网妹子的图片。这个项目用了 requests + selenium + beautifulsoup 库对网站的图片进行抓取。接下来我就,给大家一步步解析一下,怎么用 python 爬虫爬取图片并下载的。爬取结果Python爬虫...

weixin_39829574的博客 324

php 爬虫_爬虫实战系列 教你用爬虫爬取小姐姐图片

上个贴子中有网友评论有提到不会运行仓库里的爬虫代码,所以本贴特别做了个专题加以演示讲解。同样的,应广大兄弟的建议,同时也是增加大家学习爬虫的兴趣,今天还是讲解爬取小姐姐图片。 我们以煎蛋网为例(网址为:http://jandan.net/ooxx),登录 该网站,哇,风景太美,小伙伴们一定要挺住,我们是来学习爬虫的哈。我们用google浏览器打开网站,然后按F12,分析其请求...

weixin_39795325的博客 283

小猪的Python学习之旅 —— 5.使用Selenium抓取JavaScript动态生成数据的网页

小猪的Python学习之旅 —— 5.使用Selenium抓取JavaScript动态生成数据的网页 标签: Python 引言 之前抓的妹子图都是直接抓Html就可以的,就是Chrome的浏览器F12的 Elements页面结构和Network抓包返回一样的结果。后面在抓取一些 网站(比如煎蛋,还有那种小网站的时候)就发现了,Network那里抓包 获取的数据没有,而Elem...

Coder-Pig的猪栏 18万+

循环爬取图片_爬虫实战系列 教你用爬虫爬取小姐姐图片

上个贴子中有网友评论有提到不会运行仓库里的爬虫代码,所以本贴特别做了个专题加以演示讲解。同样的,应广大兄弟的建议,同时也是增加大家学习爬虫的兴趣,今天还是讲解爬取小姐姐图片。 我们以煎蛋网为例(网址为:http://jandan.net/ooxx),登录 该网站,哇,风景太美,小伙伴们一定要挺住,我们是来学习爬虫的哈。我们用google浏览器打开网站,然后按F12,分析其请求...

weixin_42360899的博客 888

python执行javascript网页_小猪的Python学习之旅 —— 5.使用Selenium抓取JavaScript动态生成数据的网页...

引言自从学习了爬虫之后,每天不写个小爬虫爬爬小姐姐,都觉得浑身难受:小姐姐是挺好看的,只是身体日渐消瘦而已,多喝营养快线就好! (快来学Python爬虫,一起爬可爱的小姐姐啊~)抓多了发现有一些小网站很狡猾,竟然搞起反爬虫来了,不直接生成数据,而是通过加载JS来生成数据,然后你打开Chrome浏览器的开发者选项,然后你会发现Elements页面结构和Network抓包抓包返回的内容竟然是不一样的,...

weixin_39800918的博客 909

手把手教你学python第二十一讲(爬虫之正则表达式一:实战爬取小姐姐图)

这里先对代理ip做一点补充,查自己ip上一讲给的是一个网站。那么还有另外2个网站也是可以查到访问的ip的,会出现网站查到的ip不一样,这是因为。需要注意的是这两个都有反爬虫的,但是也简单,你只需要修改一个user-agent就可以了。当然这仅限于你不用代理的时候。不加user-agent虽然不会报错,但是返回的内容是空的加上去之后来试验一下代理这里需要说明,对于有反爬虫机制检查user-agent...

工科僧的博客 506
上一篇: 我心目中最棒的 10 个 Python 库
下一篇: 又肝了3天,整理了80个Python DateTime 例子,必须收藏!
菜鸟学Python
博客等级 码龄9年 8095粉丝 571原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值