
爬虫
Bug永流传
这个作者很懒,什么都没留下…
展开
-
酷狗音乐关键字搜索并生成下载url
酷狗音乐关键字搜索并生成下载url1. 获取搜索的歌单信息 通过在酷狗音乐进行关键字搜索,并通过F12检测,发现网页给网站发送了get请求。https://complexsearch.kugou.com/v2/search/song?callback=callback123&keyword=%E7%A8%BB%E9%A6%99&page=1&pagesize=30&bitrate=0&isfuzzy=0&tag=em&inputtype=0&a原创 2020-08-25 19:02:43 · 3976 阅读 · 1 评论 -
QQ音乐关键字搜索并生成下载url
QQ音乐关键字搜索并生成下载url1. 获取搜索的歌单信息 通过在QQ音乐进行关键字搜索,并通过F12检测,发现网页给网站https://c.y.qq.com/soso/fcgi-bin/client_search_cp? 发送了一条get请求,便可以得到其关键词搜索的json信息,通过简化可以得到以下关键词搜索的网址:https://c.y.qq.com/soso/fcgi-bin/client_search_cp?new_json=1&remoteplace=txt.yqq.song&am原创 2020-08-25 16:04:20 · 3498 阅读 · 0 评论 -
网易云音乐关键字搜索并生成下载url
网易云音乐关键字搜索并生成下载url一、获取搜索的歌单信息 通过在网易云音乐进行关键字搜索,并通过F12检测,发现网页给网站https://music.163.com/weapi/cloudsearch/get/web?csrf_token=发送了一条post请求(经测试发现csrf_token=后的数值与登录账号有关),post的data中包含了params和encSecKey两条数据(因此无需再使用selenium来提取iframe内的数据): 通过检查其preview我们可以发现,其中包原创 2020-08-20 15:04:31 · 3767 阅读 · 0 评论 -
网易云歌单歌曲实时拉取
网易云歌单歌曲实时拉取最近个人公众号Mozi的bug日志上线了新的音乐推送API,下面来讲讲推送的实现过程。一、抓取目的抓取歌单中的歌曲列表,并提取对应歌曲的外链、歌曲名单以及作者名测试歌曲外链,删除其中失效外链存储不同歌单中的歌曲数据到csv中以便后续读取二、读取并存储cookies 经实验发现,若在未登录状态下查看歌单列表时,仅显示前10条歌曲信息:为了可以稳定的获取对应的歌单列表,这里需要获取cookie,进行cookie登录,这里选择selenium框架来进行获取:def原创 2020-08-19 16:18:12 · 1227 阅读 · 0 评论