weixin_45067618的博客

爬取的是国服的官网，所以图片并没有所谓的4K之类的， 尺寸可选择的也不多，所以我就下载了个人比较喜欢的两种尺寸。import osfrom urllib import requestimport requestsimport bs4un_download_url = []# 收集下载失败的信息def un_download(file_name,url): fail_inf...

爬取数据的地址：豆瓣电影TOP250import requestsfrom bs4 import BeautifulSoupheaders = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.122 Safa...

下面的代码是采用多线程的生产者消费者模式，下载速度比之前文章的普通下载快一点。普通下载的链接：python爬虫–王者荣耀高清壁纸下载代码在下载方面是没有问题的，可以直接运行，就是在收集打不开链接的图片信息时候会出现点问题，但是不影响主要功能的使用。import requestsfrom urllib import parsefrom urllib import requestimpor...

下面用的是普通的下载，因为图片过多，所以下载的速度可能会慢一点。# 1、通过https://apps.game.qq.com/cgi-bin/ams/module/ishow/V1.0/query/workList_inc.cgi?activityId=2735&sVerifyCode=ABCD&sDataType=JSON&iListNum=20&totalp...