使用Python爬虫（1）——爬虫网易云音乐播放数大于1000万的歌

最新推荐文章于 2025-05-18 22:53:11 发布

转载最新推荐文章于 2025-05-18 22:53:11 发布 · 1.3k 阅读

Python编程同时被 2 个专栏收录

21 篇文章

订阅专栏

爬虫

2 篇文章

订阅专栏

本教程介绍如何使用Python的Selenium库配合PhantomJS浏览器自动化工具爬取网易云音乐首页上播放次数超过500万次的热门歌单，并将数据保存为CSV文件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.安装库selenium。

2.将phantomjs.exe文件复制到python安装目录下的script目录中。

代码如下：

from selenium import webdriver
import csv
#网易云音乐歌单第一页的url
url='http://music.163.com/#/discover/playlist/?order=hot&cat=%E5%85%A8%E9%83%A8&limit=35&offset=0'

#用phantomJS接口创建一个Selenium的WebDriver
driver=webdriver.PhantomJS()

#准备好存储歌单的csv文件
csv_file=open("playlist1.csv","w",newline='')
writer=csv.writer(csv_file)
writer.writerow(['标题','播放数','链接'])

#解析每一页，直到‘下一页’为空
while url !='javascript:void(0)':
    #用WebDriver加载页面
    driver.get(url)
    #切换到内容的iframe
    driver.switch_to.frame("contentFrame")
    #定位歌单标签
    #data=driver.find_element_by_id("m-pl-container").find_element_by_tag_name("li")
    data = driver.find_element_by_id("m-pl-container").find_elements_by_tag_name("li")
    print('这是data：',data)
    print('这是data的类型',type(data))
    #解析一页中的所有歌单
    for i in range(len(data)):
        #获取播放数
        nb=data[i].find_element_by_class_name("nb").text
        if '万' in nb and int(nb.split("万")[0]) > 1000:
            #获取播放数大于500万的歌单的封面
            msk=data[i].find_element_by_css_selector("a.msk")
            #把封面上的标题和链接连同播放数一起写到文件中
            writer.writerow([msk.get_attribute('title'), nb, msk.get_attribute('href')])
    #定位‘下一页’的url
    url=driver.find_element_by_css_selector("a.zbtn.znxt").get_attribute('href')
csv_file.close()