爬虫-煎蛋MM图

[Python爬虫]煎蛋网OOXX妹子图爬虫(1)——解密图片地址 之前在鱼C论坛的时候,看到很多人都在用Python写爬虫爬煎蛋网的妹子图,当时我也写过,爬了很多的妹子图片。后来煎蛋网把妹子图的网页改进了,对图片的地址进行了加密,所以论坛里面的人经常有人问怎么请求的页面没有链接。这篇文章就来说一下煎蛋网OOXX妹子图的链接获取方式。 首先说明一下,之前煎蛋网之所以增加了反爬虫机制,应该就是因为有太多的人去爬他们的网站了。爬虫频繁的访问网站会给网站带来压力,所以,... 阅读详情

之前学了用爬虫抓糗百的段子,但是呢,爬段子有什么好爬的,这次我们来学怎么爬MM图,然后自动下载到我们的文件夹中。

先上代码
这里写图片描述
这里写图片描述

这里主要用到urllib中的urlretrieve()函数,用这个函数将远程数据下载到本地。我们说,之前就说过,上网是为了获取资源,而资源的命名就是通过URL的,因此我们只需要抓取图片的URL,保存到本地就行了。

urlretrieve(url, filename = None, reporthook = None, data = None)
url:资源的url
filename:本地资源路径(绝对路径),即你把资源下载到哪
reporthook:这个是一个回调函数,当连接上服务器、以及相应的数据块传输完毕时会触发该回调,我们可以利用这个回调函数来显示当前的下载进度。
data: 指post到服务器的数据

其他的改动就是正则表达式的匹配模式改一下,我这里的pattern不是很精准,因此用if来辅助我排除不需要的项,把需要的放在imglist列表中。之后就依次下载就行了。这个是简易版的,只爬了一页,比较粗糙。之后会增加点功能,像前面糗百那样

煎蛋网爬虫 ooxx Warning Just for studying. Please don't consume Jandan too much network traffic. Run Make sure you have installed python, then you can run the code below: python ooxx.py About author: Haipz site: http://haipz.com e-mail: haipzm@gmail.com 立即下载

相关推荐

JianDanSpider:煎蛋网爬虫

#煎蛋网图片爬取 简介: 几年前写的煎蛋网图片抓取,上传保留。 但是现在用不了了,图片url被煎蛋改成用key值,通过js计算的方式生成url,js被混淆了。 如需继续使用,解密混淆的js方法,模拟计算即可,目前做了一部分。 JianDanSpider.js 是模拟煎蛋网的js逻辑。(有一丝丝问题,没功夫改了) DecodeTest.java 是调用JianDanSpider.js 生成url的逻辑。 用法: 运行后,图片存在 D://煎蛋图;

Python 多线程爬虫爬取爱MM图片(涉及到多进程)

在爬虫学习的过程中,当遇到爬取量较大的情况下,爬虫消耗的时间会比较多。除开使用 Python 爬虫框架之外,合理使用多进程与多线程来爬取数据是非常有效的。 在前两天的实例操作过程中,由于爬取内容较多,导致时间过长,因此我深入研究学习了多线程以及多进程的相关知识,将这两种方法与实例相结合,可以非常有效的缩短爬取时间。废话不多说,我们进入主题。未成年人请酌情阅读 正文 本次实例是下载图片集,基本上可以...

Herishwater的博客 1765

煎蛋网MM图片抓取脚本

要抓取第几页,改写最下面的起始页面和截止页码就可以了。 因为脚本运行较慢,可能卡顿,不要关闭程序,最小化即可

python爬虫之反爬虫情况下的煎蛋网图片爬取初步探索

本次爬虫网址:http://jandan.net/ooxx 前言:   前段时间一直在折腾基于qqbot的QQ机器人,昨天用itchat在微信上也写了一个机器人,相比webqq,微信的web端功能比较丰富,图片、文件等都可以传输。今天闲来无事准备给写个爬虫丰富微信机器人的功能,就想到了爬煎蛋网上面的图片。   说做就做,打开浏览器一看,渲染前的源码里是没有图片地址的。这个很正常,

van_brilliant的博客 1万+

某银行大数据分析平台之云原生架构

软考架构师论文

doudoudouy的博客 769

星网锐捷语音网关密码重置全攻略:两种高效恢复出厂设置方法详解

本文详细解析了星网锐捷语音网关密码重置的两种高效方法,包括通过eth1通用口和eth0管理口的操作步骤。针对不同型号设备,提供硬件连接、Web控制台登录及CRT工具使用的具体指南,帮助用户快速恢复出厂设置并重建语音环境配置。

weixin_28698059的博客 528

Python爬虫入门学习例子之煎蛋网(福利哦)

初学Python爬虫,学习资料是这篇博客:Python爬虫入门教程 经过前边两个例子(糗事百科爬虫和百度贴吧爬虫)的学习,我自己写了一个练习的例子:爬煎蛋网的妹子图,福利哦(*^__^*)  #煎蛋网爬图 #导入了BeautifulSoup4(正则)和requests(代替urllib2,但是我不会使,还是用的lib2)包 #注意1:煎蛋的页数是倒着来的,从大往小来,输入的时候要注意 #注意2:

login_sonata的博客 4140

手把手教你用Matlab为PMSM电流环设计2P2Z补偿器(附与PI对比)

本文详细介绍了如何使用Matlab的controlSystemDesigner工具为永磁同步电机(PMSM)电流环设计2P2Z补偿器,并与传统PI控制器进行性能对比。通过频域分析和时域仿真,展示了2P2Z补偿器在提升带宽、减少超调等方面的优势,为高性能伺服驱动和精密运动控制提供了实用解决方案。

weixin_42551227的博客 381

手把手教你用Python爬虫煎蛋妹纸海量图片

我们的目标是用爬虫来干一件略污事情 最近听说煎蛋上有好多可爱的妹子,而且爬虫从妹子图抓起练手最好,毕竟动力大嘛。而且现在网络上的妹子很黄很暴力,一下接受太多容易营养不量,但是本着有人身体就比较好的套路,特意分享下用点简单的技术去获取资源。 以后如果有机会,再给大家说说日本爱情动(大)作(雾)片的种子搜索爬取,多多关注。   请先准备 作案工具 我们只准备最简单的       ...

weixin_33885253的博客 525

一分钟理解 AP(Affinity Propagation) 亲和⼒传播算法

这篇博客发出来后,我用 Rust 复现代码出现问题。为此,我对对照了 sklearn 的相关代码,反复比较了两天,发现一处 bug,把 += 误写成了 =,导致数据量大的时候完全无法聚类。这个debug过程让我仔细梳理的 AP 算法的计算过程,今天我对这篇博客做了大规模修改,以便能原样展现原论文思想。

程序猿视角 3219

双目视觉入门实战:用Matlab标定相机,再到Python OpenCV完成测距的完整链路

本文详细介绍了双目视觉技术的完整实现流程,从Matlab相机标定到Python OpenCV测距的全链路实践。重点解析了Matlab与OpenCV的参数转换技巧,以及立体校正、视差计算等关键步骤的代码实现,帮助开发者快速掌握双目测距系统的搭建方法。

weixin_29166013的博客 447

Python爬虫爬取煎蛋网图片代码实例

这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下 今天,试着爬取了煎蛋网的图片。 用到的包: urllib.request os 分别使用几个函数,来控制下载的图片的页数,获取图片的网页,获取网页页数以及保存图片到本地。过程简单清晰明了 直接上源代码: import urllib.reques...

python爬虫开发教程 2241

损失函数大汇总(五十三)(Boundary Loss附公式推导与代码)

摘要 Boundary Loss是一种针对图像分割任务的新型损失函数,特别适用于高度类别不平衡的细粒度分割场景。与传统的区域型损失(如Dice、交叉熵)不同,它通过计算预测边界与真实边界之间的距离来优化模型,更关注边界精度而非区域重叠。核心思想是利用距离图(distance map)将边界约束转化为区域积分形式,实现端到端训练。具体实现中,损失函数为预测概率与距离图的点积,梯度仅取决于距离图,具有明确的空间引导性。相比区域型损失,Boundary Loss能更好处理小目标、细长结构等边界敏感任务,可与Dic

悦学共鸣,温柔以待,汇聚光芒,共同成长 240

Python爬虫之煎蛋网妹子图(一)

python爬虫是数据挖掘与数据处理中的重要一部分,为了让大家深入了解爬虫,这里会更新爬虫系列教程及例子。第一篇来送福利啦!!!http://jandan.net/ooxx,先进来看一眼,是不是动力十足。 import urllib.request import os def url_open(url): req = urllib.request.Request(url)

一摩尔自由的博客 2060

MIPI C-PHY介绍(Specification for C-PHY V1.2)

本文档描述了一个名为C-PHY的高速串行接口,它在带宽有限(bandwidth limited channels,看的有人说C的含义就是channel limit)的通道上提供高吞吐量性能,用于连接到外设,包括显示器和摄像头。首先0x4fff在0x4000~0x4fff区域,则f=(0,0,0,0,0,0,1),顺序是S6~S1;最后,端到端的传输过程是什么样呢,如下图所示,16bit先转换成7个符号(每个符号3位,共21位),然后并行数据转换成串行数据,输送到符号编码器和3个线的驱动器,接收端流程相反。

qflook的博客 5884

《YOLO11魔术师专栏》专栏介绍 & 专栏目录

【原创自研模块】【多组合点优化】【注意力机制】【主干篇】【neck优化】【卷积魔改】 【block&多尺度融合结合】【损失&IOU优化】【上下采样优化】【小目标性能提升】【前沿论文分享】【训练实战篇】

①答疑群聊服务;②YOLO大模型知识问答系统;③计算机视觉论文生成智能体; 1万+

python爬图代码实例_Python爬虫爬取煎蛋网图片代码实例

这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片。用到的包:urllib.requestos分别使用几个函数,来控制下载的图片的页数,获取图片的网页,获取网页页数以及保存图片到本地。过程简单清晰明了直接上源代码:import urllib.requestimport...

weixin_36015177的博客 181

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

python爬虫图片实例-Python爬虫爬取煎蛋网图片代码实例

这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片。用到的包:urllib.requestos分别使用几个函数,来控制下载的图片的页数,获取图片的网页,获取网页页数以及保存图片到本地。过程简单清晰明了直接上源代码:import urllib.requestimport...

weixin_37988176的博客 244

VC中sqlite的使用

在VC中对sqlite的使用,实现数据库大批数据的快速插入,读取数据库中的数据在ListCtrl中显示

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

python爬虫爬取图片代码_Python爬虫爬取煎蛋网图片代码实例

这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片。用到的包:urllib.requestos分别使用几个函数,来控制下载的图片的页数,获取图片的网页,获取网页页数以及保存图片到本地。过程简单清晰明了直接上源代码:import urllib.requestimport...

weixin_39960116的博客 175

python爬虫爬取图片代码_Python爬虫爬取煎蛋网图片代码实战

这篇文章主要介绍了Python爬虫爬取煎蛋网图片代码实例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友可以参考下今天,试着爬取了煎蛋网的图片。在这里顺便给大家推荐一个资源很全的python学习免废解答.裙 :七衣衣九七七巴而五(数字的谐音)转换下可以找到了,这里有资深程序员分享以前学习心得,学习笔记,还有一线企业的工作经验,且给大家精心整理一份python...

weixin_39789101的博客 187

爬虫煎蛋网的mm图片

import urllib.request import os url_list = [ 'http://jandan.net/ooxx/MjAyMDAxMTUtMTM3#comments', #每一页的URL,当前是136页 'http://jandan.net/ooxx/MjAyMDAxMTUtMTM2#comments', 'http://jandan.ne...

mtldswz312的博客 4960

爬虫爬取煎蛋网美女图片

第一次真正的完成了一个爬虫,爬的是煎蛋网图片,望大神指点 爬取的时候只需要设置PAGE参数就可以来,爬取的总页数会比设置的页数多一页 # @Time : 2020-07-20 # @Author : 黎先生 # @FileName: jandan.py # @Blog :https://blog.youkuaiyun.com/q79815321 import requests from bs4 import BeautifulSoup import re #正则表达式匹配图片 FIND_IMG =

黎先生的博客 476

Python 爬虫 爬取 煎蛋网 图片

今天,试着爬取了煎蛋网的图片。 用到的包: urllib.request os 分别使用几个函数,来控制下载的图片的页数,获取图片的网页,获取网页页数以及保存图片到本地。过程简单清晰明了 直接上源代码: import urllib.request import os def url_open(url): req = urllib.request....

227

BeautifulSoup编写PYTHON爬虫案例-下载MM图片

python小白学爬虫 断断续续学习python差不多也有2个月了,摸了不少坑磕磕绊绊的完成了这个爬虫,对我来说还算蛮有意义的,留档纪念下。 爬虫背景 目的:爬取网页前10页的MM图片 网页:http://jandan.net/ooxx(煎蛋网,正经网站) 分析过程: 1、查找当前页面多个图片的URL 2、查找下一页URL 3、循环打开10个页面分别保存每个页面的MM图片 代码如下: import...

lianglee513的博客 410

104个实用网络爬虫项目资源整理(超全)

爬虫是一种可以爬取指定网站页面的指定信息的应用程序,通过爬虫,我们可以获取网站中我们需要的数据。通过一个 URI 地址,模拟类似浏览器的行为获取这个 URI 地址对应的 HTML 页面,部分爬虫甚至还可以支持 JavaScript 的执行。获取之后通过页面解析,从页面中的指定的 HTML 标签下提取得到我们需要的数据。对数据进行处理之后存入指定的存储,比如文件系统,MySQL 等关系型数据库,Redis,MongoDB 等 NoSQL 数据库中。

1万+

Python的学习笔记DAY8---爬虫练习之煎蛋网妹子图爬虫

按着教程做了个煎蛋网妹子图的爬虫,代码如下:import urllib.request import os import re def url_open(url): req = urllib.request.Request(url) req.add_header('User-Agent','Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWe

菜鸡的路 463
上一篇: 爬虫--糗百
PythonKidDz
博客等级 码龄10年 7粉丝 30原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值