使用python编写的落网电台下载工具
落网是个非常不错的独立音乐介绍网站,但是上面提供的歌曲仅供试听,没有提供下载链接。相信不少同学都想过有没工具把歌曲下载下来呢?答案是:有。
我最早是使用遨游浏览器,它里面提供一个插件(资源探测器),只要点开,就能看到当前浏览器页面中有没有可下载的链接。当时觉得还挺方便的,就是
要一首一首地去下,还是有些麻烦。当然火狐浏览器里也有个插件(NetVideoHunter),功能上也是类似。
对于学习过python的同学,都知道它用来爬取网络资源上非常方便、强大。前段时间本人写过使用使用python抓取落网期刊图片,但觉得还是不够实用,
要是能够把任意一个(或者所有)期刊资源都下载到本地,那该多好!!于是,自己花了段时间去观察落网页面的HTML源码,发现期刊的曲目链接其实是隐藏
在audio标签内的(比如第一期第一首曲目的链接:http://mp3-cdn.luoo.net/low/luoo/radio1/1.mp3)。
# -*- coding:gbk -*-
'''
Created on 2017年2月26日
#
# 爬取落网期刊信息(包括标题,介绍,音频文件等)
#
@author: ysx
'''
from __future__ import unicode_literals
from Queue import Queue
import os
import re
import sys
import threading
import uuid
import bs4
from bs4.element import NavigableString
import requests
reload(sys)
sys.setdefaultencoding('gbk')
# 下载路径
BASE_DIR = r'F:\luonet'
# 下载资源超时时间
TIMEOUT = 10
# 当前最大期刊号
MAX_VOL_NO = 906
# 下载期刊使用最大线程数
MAX_THREAD_NUM = 10
def parse_vol_num(vol_url):
'''给定期刊Url,判定是第几期
'''
try:
return vol_url.split('/')[-1]
except:
raise RuntimeError('给定期刊Url[%s]不合法..')
def check_path_avail(path):
'''实际运行过程中,按曲目名去命名mp3文件,会出现写入报IOError(原因是歌曲名中包含?等非法字符)'''
check_result = True
if not os.path.exists(path):
try:
open(path, 'wb')
except IOError:
print '当前路径:[%s]无法写入..'%path
check_result = False
return check_result
def download_source(url, path):
print('下载资源:[%s]'%url)
resp = requests.get(url, timeout=TIMEOUT)
resp.raise_for_status() # 下载出现问题,立即抛出异常
with open(path, 'wb')

最低0.47元/天 解锁文章
268

被折叠的 条评论
为什么被折叠?



