手把手教你从分析到实现,王者荣耀壁纸爬虫!表弟馋哭了!

【王者荣耀】全英雄无水印皮肤下载器 名称:王者荣耀全英雄无水印皮肤下载器软件:由pyinstaller打包而成平台:win10 64位有效(其他请大家自测)效果:双击运行就自动下载王者荣耀全英雄无水印皮肤, 会新建一个img文件夹存放结果图:如果大家觉得有用的话就自取,顺便免费评分或者其他啥的直接上连接吧:蓝奏云:软件:https://www.lanzous.com/i9y4jhi 密码:1wtu(2.0版在下方)已经下... 阅读详情

一、分析需要爬取的网站

①、打开官方王者荣耀壁纸网站

  • 网站地址: https://pvp.qq.com/web201605/wallpaper.shtml

②、快捷键F12,调出控制台进行抓包

③、找到正确的链接并分析

④、查看返回数据格式

⑤、解析url链接

⑥、查看url内容是否是所需图片,发现其实是缩略图

⑦、那就去分析网站,随便点开一张壁纸,查看指定格式的链接

⑧、找到目标地址

⑨、分析目标链接和缩略图的链接区别

  • 缩略图:http://shp.qpic.cn/ishow/2735090714/1599460171_84828260_8311_sProdImgNo_6.jpg/200
  • 目标图:http://shp.qpic.cn/ishow/2735090714/1599460171_84828260_8311_sProdImgNo_6.jpg/0
  • 可以知道,将指定格式的缩略图地址后面200替换成0就是目标真实图片

二、爬虫代码

①、至此,爬虫分析完成,爬虫完整代码如下

#!/usr/bin/env python
# encoding: utf-8
'''
#-------------------------------------------------------------------
#                   CONFIDENTIAL --- CUSTOM STUDIOS
#-------------------------------------------------------------------
#
#                   @Project Name : 王者荣耀壁纸下载
#
#                   @File Name    : main.py
#
#                   @Programmer   : Felix
#
#                   @Start Date   : 2020/7/30 14:42
#
#                   @Last Update  : 2020/7/30 14:42
#
#-------------------------------------------------------------------
'''
import os, time, requests, json, re
from retrying import retry
from urllib import parse
 
class HonorOfKings:
    '''
     This is a main Class, the file contains all documents.
     One document contains paragraphs that have several sentences
     It loads the original file and converts the original file to new content
     Then the new content will be saved by this class
    '''
    def __init__(self, save_path='./heros'):
        self.save_path = save_path
        self.time = str(time.time()).split('.')
        self.url = 'https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalpage=0&page={}&iOrder=0&iSortNumClose=1&iAMSActivityId=51991&_everyRead=true&iTypeId=2&iFlowId=267733&iActId=2735&iModuleId=2735&_=%s' % self.time[0]
 
    def hello(self):
        '''
        This is a welcome speech
        :return: self
        '''
        print("*" * 50)
        print(' ' * 18 + '王者荣耀壁纸下载')
        print(' ' * 5 + '作者: Felix  Date: 2020-05-20 13:14')
        print("*" * 50)
        return self
 
    def run(self):
        '''
        The program entry
        '''
        print('↓' * 20 + ' 格式选择: ' + '↓' * 20)
        print('1.缩略图 2.1024x768 3.1280x720 4.1280x1024 5.1440x900 6.1920x1080 7.1920x1200 8.1920x1440')
        size = input('请输入您想下载的格式序号,默认6:')
        size = size if size and int(size) in [1,2,3,4,5,6,7,8] else 6
 
        print('---下载开始...')
        page = 0
        offset = 0
        total_response = self.request(self.url.format(page)).text
        total_res = json.loads(total_response)
        total_page = --int(total_res['iTotalPages'])
        print('---总共 {} 页...' . format(total_page))
        while True:
            if offset > total_page:
                break
            url = self.url.format(offset)
            response = self.request(url).text
            result = json.loads(response)
            now = 0
            for item in result["List"]:
                now += 1
                hero_name = parse.unquote(item['sProdName']).split('-')[0]
                hero_name = re.sub(r'[【】:.<>|·@#$%^&() ]', '', hero_name)
                print('---正在下载第 {} 页 {} 英雄 进度{}/{}...' . format(offset, hero_name, now, len(result["List"])))
                hero_url = parse.unquote(item['sProdImgNo_{}'.format(str(size))])
                save_path = self.save_path + '/' + hero_name
                save_name = save_path + '/' + hero_url.split('/')[-2]
                if not os.path.exists(save_path):
                    os.makedirs(save_path)
                if not os.path.exists(save_name):
                    with open(save_name, 'wb') as f:
                        response_content = self.request(hero_url.replace("/200", "/0")).content
                        f.write(response_content)
            offset += 1
        print('---下载完成...')
 
    @retry(stop_max_attempt_number=3)
    def request(self, url):
        '''
        Send a request
        :param url: the url of request
        :param timeout: the time of request
        :return: the result of request
        '''
        response = requests.get(url, timeout=10)
        assert response.status_code == 200
        return response
 
if __name__ == "__main__":
    HonorOfKings().hello().run()


②、详细分析链接

  • 其实前端发送的是jsonp请求,这样的数据在python不好处理,因为不是标准的json格式
  • 因为其前面JQuery1710418919222这个字符串,而知道jsonp的请求的都知道,有这个前缀,必然请求链接中有相同的callback参数,将其删除即可
  • 因此我python代码中是删除了这个参数的
  • 这个链接还有很多参数,其实我觉得很多都可以删除,但是我懒得慢慢去试
  • 这个请求链接中最重要的一个参数必然就是页码数,也就是page这个参数,iListNum=20&totalpage=0&page={}
  • 上面的三个参数是可用的,一个是20,指每页的数量,totalpage估计没啥用,page抓包发现是从0开始的,这个需要注意一下,因为下面代码需要将总页数减1
self.url = 'https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalpage=0&page={}&iOrder=0&iSortNumClose=1&iAMSActivityId=51991&_everyRead=true&iTypeId=2&iFlowId=267733&iActId=2735&iModuleId=2735&_=%s' % self.time[0]

③、格式选择

  • 开始运行时,让你选择想下载格式的序号,为什么是8个格式呢,看原网页就知道了,8种不同分辨率的
  • 看上面的图片,缩略图链接有1-8,对应了8中分辨率的缩略图,那么原图必然也是8种
  • 这里我默认1920*1080的,一般电脑用这个分辨率的都可以
  • 其中1的原图,你自己试下,其实也是一个缩略图,所以一般下载选择2-8
print('↓' * 20 + ' 格式选择: ' + '↓' * 20)
print('1.缩略图 2.1024x768 3.1280x720 4.1280x1024 5.1440x900 6.1920x1080 7.1920x1200 8.1920x1440')
size = input('请输入您想下载的格式序号,默认6:')
size = size if size and int(size) in [1,2,3,4,5,6,7,8] else 6


④、下载代码分析

  • 第一次请求主要是为了获取总页数,但是请求是从0开始为第一页,所以需要减去1
  • while true中就是开始从0循环去请求地址,先找到缩略图地址,然后将缩略图的地址链接200替换成0就是目标图片地址了
  • 如果名字中有特殊字符,就将其用正则去除,不然可能会影响路径的查找
print('---下载开始...')
page = 0
offset = 0
total_response = self.request(self.url.format(page)).text
total_res = json.loads(total_response)
total_page = --int(total_res['iTotalPages'])
print('---总共 {} 页...' . format(total_page))
while True:
    if offset > total_page:
        break
    url = self.url.format(offset)
    response = self.request(url).text
    result = json.loads(response)
    now = 0
    for item in result["List"]:
        now += 1
        hero_name = parse.unquote(item['sProdName']).split('-')[0]
        hero_name = re.sub(r'[【】:.<>|·@#$%^&() ]', '', hero_name)
        print('---正在下载第 {} 页 {} 英雄 进度{}/{}...' . format(offset, hero_name, now, len(result["List"])))
        hero_url = parse.unquote(item['sProdImgNo_{}'.format(str(size))])
        save_path = self.save_path + '/' + hero_name
        save_name = save_path + '/' + hero_url.split('/')[-2]
        if not os.path.exists(save_path):
            os.makedirs(save_path)
        if not os.path.exists(save_name):
            with open(save_name, 'wb') as f:
                response_content = self.request(hero_url.replace("/200", "/0")).content
                f.write(response_content)
    offset += 1
print('---下载完成...')


⑤、爬虫运行的结果,相同名字的放在同一个文件夹下

你学会了吗?

此文转载文,著作权归作者所有,如有侵权联系小编删除!

原文地址:https://blog.youkuaiyun.com/weixin_41635750/article/details

完整项目代码或者视频教程点这!

 

Python一键获取所有高清无码王者皮肤图片 前言 突然看到王者荣耀每个英雄的图片很不错,所有就一张一张保存了. 分析 1.打开王者荣耀官方英雄列表 2.分析接口 3.实际操作 4.调整代码 5.开始启动程序 开始 其中中间发现,获取的页面中并没有直接找到图片的地址, 所以先拿到皮肤名称拼接成图片链接,然后真正拿到高清无码皮肤图片 # -*- coding: gbk -*-# # ------------------------------... 阅读详情

相关推荐

王者荣耀英雄皮肤图片爬取

王者荣耀英雄皮肤爬取

King 2261

python 爬虫 王者荣耀高清图片 代码分享

import os import requests import json url01=r'https://pvp.qq.com/web201605/js/herolist.json' url02=r'http://game.gtimg.cn/images/yxzj/img201606/skin/hero-info/105/105-bigskin-1.jpg' if 'iamges' not in os.listdir(): os.makedirs('images') res = requests.g

weixin_47095925的博客 6906

王者荣耀场景地图模型Unity3D

王者荣耀场景地图模型Unity3D,王者荣耀场景地图模型Unity3D

下载王者荣耀高清壁纸

一共有两种下载方法,一种单线程下载,一种多线程下载,运行时须创建image文件夹

m0_65384516的博客 3236

分享一下使用Xilinx FPGA驱动MIPI DSI LCD屏的心路历程

分享一下调试用Xilinx FPGA驱动MIPI DSI LCD屏的心路历程,看到的朋友们,可以避免继续踩坑。

haoxingheng的专栏 5018

Allegro输出光绘文件规范

添加钻孔表的具体步骤为:1.通过屏幕右边的Visibility选项的Views列表,将Drill层打开2.将Visibility选项中的PIN和Via选项都选中,见下图所示: 参数设好之后关闭NC Drill/Parameters窗口,输出数控机床钻孔文件的命令菜单为:Manufacture=>NC=>NC Drill…,打开的窗口如下: 输出数控机床钻孔文件的具体步骤为: 上图是光绘输出的层控制窗口,还有一个窗口是输出参数的控制窗口,我们通过点击上图的第二个列表项General Parameters来

axingxiansen的博客 2810

Python【王者荣耀】全英雄无水印皮肤

# 爬取王者荣耀全皮肤 import os import re import json import requests if not os.path.exists('img'): os.mkdir('img') url = 'https://pvp.qq.com/web201605/js/herolist.json' headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.3...

天才中年英俊的博客 4114

学Simulink--基于多物理场耦合与系统集成的储能系统场景实例:压缩空气储能(CAES)系统的热力学建模与效率分析

本文提供了一个基于Simulink的压缩空气储能(CAES)系统热力学建模教程。通过多物理场耦合方法,详细演示了从系统架构设计到仿真测试的全过程,包括多级压缩机/膨胀机系统搭建、显热蓄热系统设计以及效率分析。文章重点强调了热管理对提升CAES效率的关键作用,并给出了68%电-电效率的优化案例。最后提出了变工况建模、不同蓄热介质对比等高级优化方向,为开发零碳大容量储能系统提供了实用工具和方法。

amy_mhd的博客 131

人物交互算法(HOI)学习笔记之 ——QPIC

HOI 检测,transformer

seniusen的博客 5429

YOLO26改进 - C2PSA | C2PSA融合DiffAttention差分注意力:轻量级差分计算实现高效特征降噪,提升模型抗干扰能力

本文介绍了 DiffCLIP,一种将差分注意力机制集成到 CLIP 架构的视觉 - 语言模型,并将其应用于 YOLO26。差分注意力机制通过计算两个互补注意力分布的差值,抵消无关信息干扰。单头差分注意力将 Q 和 K 拆分,分别计算注意力分布后做差值融合;多头差分注意力则每个头独立执行差分操作后聚合输出。关键参数 λ 可动态调控噪声抵消强度。我们将 DiffAttention 代码集成到 YOLO26 中,替换原有模块。实验表明,改进后的 YOLO26 在图像 - 文本理解任务中表现出色。

魔改工程师的博客 602

STM32G4 电机外设篇(三) TIM1 发波 和 ADC COMP DAC级联

STM32G4电机控制外设应用笔记摘要:本文详细介绍了TIM1高级定时器生成三对互补PWM波的配置方法(预分频器PSC=30000,重装载值ARR=10000),重点说明需断开电机连线避免干扰。通过STM32CubeMX配置TIM1通道4触发ADC采样,设置RCR分频参数,并给出Keil代码修改要点。第二部分探讨了TIM1、ADC、比较器和DAC的级联应用,包括电流采样触发时序(在PWM波峰值前采样)和过流保护机制。配置步骤包含DAC3作为比较器负输入端、设置Break触发封波保护,并附关键代码段实现外设联

qq_43091070的博客 1104

爬取王者荣耀网站所有英雄皮肤图片

访问王者荣耀官方网站 使用chrome进行检查 找到网站发送的herolist.json文件,该文件描述的是英雄皮肤图片的配置情况,下载。经过分析图片的源地址, 写出以下程序进行图片的批量下载(事先要在脚本的同级目录中创建pic文件夹) import json import requests file = 'herolist.json' with open(file, 'r',...

z1314520cz 6225

【CSP-S 提高组】考试大纲集合

【CSP-S提高组】考试大纲集合

weixin_42596089的博客 7261

游戏大魔王少不了王者荣耀壁纸图片

王者荣耀是腾讯首款5V5英雄公平对战手游,已经出了几十位英雄,定期也会推出新的英雄,英雄定位可分为法师、战士、坦克、刺客、射手、辅助,不同的英雄拥有不同的属性和技能。高图网 www.gaopic.com 给您提供海量风格各异的英雄壁纸图片,游戏大魔王少不了! 王者荣耀最新英雄鬼谷子皮肤壁纸图片 王者荣耀最强刺客露娜皮肤图片壁纸 手游王者荣耀王昭君皮肤图片高清壁纸 王者荣耀韩信皮肤图片高清电脑桌面壁纸 王者荣耀花木兰皮肤图片高清壁纸 王者荣耀貂蝉皮肤图片电脑桌面壁纸

awayaya1的博客 6558

【OpenClaw从入门到精通】第17篇:OpenClaw巨头布局实战:阿里CoPaw/腾讯云/百度/火山引擎深度拆解(2026实操版)

2026年OpenClaw以22.8万星标登顶GitHub,引发阿里、腾讯、百度、字节等互联网巨头入局角逐。本文基于公开技术文档与实测经验,深度解析四大巨头的OpenClaw布局战略:阿里云CoPaw的全栈托管、腾讯云的流量入口绑定、百度智能云的搜索生态内嵌、火山引擎的极致智力供给。从核心原理、算法构建、实操流程三个维度,提供可直接落地的接入方案,包含完整代码示例与执行结果验证。通过流程图可视化核心架构,搭配避坑指南与选型矩阵,帮助新手快速上手、进阶读者实现多厂商协同部署。

专注于人工智能、软件开发、工控自动化、工厂数字化及智能化等领域,希望和大家共同进步! 1686

uniapp微信小程序 - 解决苹果ios底部输入框被软键盘遮挡的问题,input/textarea底部输入框被弹出的软键盘挡住部分或全部遮住(解决uniApp小程序底部输入框,键盘弹起时页面整体上移

uniapp: IOS微信小程序输入框部分被软键盘遮挡问题,iOS微信小程序键盘弹出时输入框被挡住,uniapp小程序苹果IOS系统软键盘唤起导致底部输入框被遮挡的问题,ios 键盘弹出input输入框被遮挡,uniapp textarea输入框软键盘遮挡问题,苹果手机ios系统,解决uni-app微信小程序底部输入框,键盘弹起时页面整体上移 问题,关于手机端IOS系统微信中虚拟键盘遮挡input输入框问题的解决方案,uniapp使用输入框固定在底部键盘弹起把输入框挡住问题,安卓上没问题就苹果不行,仅ios

🏆 前端领域优质创作者 5601

爬取王者荣耀官网英雄皮肤高清壁纸(简易方法)

代码加详细注释。 import requests #import os url = "https://pvp.qq.com/web201605/js/herolist.json" #想要爬取的网址 ''' 请求头:User-Agent:简称UA,它是一个特殊的字符串头,可以使服务器识别客户使用的操作系统及版本 在做爬虫时加上此信息,可以伪装成浏览器,如果不加很可能会被识别出为爬虫,这个一...

honorwh的博客 3948

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

2014-2-13 遮挡图

一个怪物怎么决定对一个敌对目标进行攻击呢? 从现实世界类推,貌似以下解决方法最直接:       一旦进入怪物周边一定距离内,即开始攻击. 但是想想这个场景: 一个怪物位于二楼某个房间,一个玩家走到一楼房间对应该怪物的下方,它们之间的距离满足了所指定距离要求,你让怪物去发动攻击,这也太扯了吧. 那么采用这种方案:     利用现有的导航图,一旦怪物发现在导航图中一定距离

吴涛(飞扬工作室)的专栏 1912

复分析 阿尔福斯(Ahlfors) 第三版答案 英文

答案分为十章,有部分习题没有答案,全英文复分析阿尔福斯(Ahlfors) 第三版答案

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

王者荣耀游戏高清壁纸(手机|电脑),来袭

是否也你也一样,是个手机壁纸控,喜欢每天换一张,永远看不腻的新鲜感。 对于喜欢游戏的你,更是把桌面放上喜欢的角色人物, 深深的代入感! 不用为找高清壁纸而苦恼,在高图网 搜集了高清壁纸图库已有数百万出众网友,选择高清壁纸网。 喜欢王者的你,等待角色来袭! 王者荣耀琪拉心灵骇客安皮肤图片高清壁纸 《王者荣耀》狄仁杰断案大师重做新皮肤图片壁纸 《王者荣耀》公孙离花间舞新英雄皮肤图片壁纸 《王者荣耀》公孙离幻舞玲珑新英雄皮肤图片壁纸 《王者荣耀》雅典娜冰冠公主新皮肤图片壁纸

awayaya1的博客 8798

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

QPIC阅读笔记

QPIC阅读笔记

weixin_43628058的博客 1008

【亲测免费】 探索未来视觉识别:QPIC——基于查询的图像级上下文信息的双人交互检测

探索未来视觉识别:QPIC——基于查询的图像级上下文信息的双人交互检测 项目简介 QPIC(Query-Based Pairwise Human-Object Interaction Detection with Image-Wide Contextual Information)是一种创新的深度学习模型,由Masato Tamura、Hiroki Ohashi和Tomoaki Yoshinaga...

gitblog_00077的博客 1187

【爬虫】王者荣耀爬取英雄高清4K图片

import requests import json resp = requests.get('https://pvp.qq.com/web201605/js/herolist.json') heros_list = json.loads(resp.text) print(heros_list) for hero in heros_list: id = hero['ename'] # 得到英雄的ID name = hero['cname'] #得到英雄名字 skin_url =.

码农-Vax天道的时间宝藏 1万+

【亲测免费】 QPIC 项目使用教程

QPIC 项目使用教程 1. 项目介绍 QPIC(Query-Based Pairwise Human-Object Interaction Detection with Image-Wide Contextual Information)是一个用于检测图像中人-物交互的开源项目。该项目通过扩展DETR(DEtection TRansformer)对象检测器,利用查询机制和注意力机制在Transf...

gitblog_01172的博客 586

发张版服图片

发张版服图片

zzyong00的专栏 930

玩游戏的你知道早期的貂蝉建模图有多好看吗

闭月羞花,倾国倾城的女英雄那当之无愧的是貂蝉了,不管是男生还是女生都非常的喜欢她。先不说貂蝉美丽的外表,她在游戏里的伤害力也是很强的。而她的出场率也是很高的,这么想来,貂蝉是有多受欢迎。对于貂蝉的皮肤可能大多数人都喜欢仲夏夜之梦那一款吧,虽然每一款都很好看!(喜欢或者想更多了解游戏建模可以私信主编哦!也可以加企鹅社交团:1046+777+540) 但我们这次要说的是貂蝉的原皮肤建模。有句话叫没有对比就没有伤害。在没有可比东西的情况下,我们大家都认为貂蝉的模型很完美。那么现在貂蝉皮肤越来越多,这就让很多

weixin_49538426的博客 3950
上一篇: 教你用python操作摄像头以及对视频流的处理!
下一篇: 使用Python多进程教你下载M3U8加密或非加密视频!
pythonlaodi
博客等级 码龄6年 286粉丝 244原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值