张小凯的个人空间

  最近学习了一下爬虫的原理和基本的思路, 并且利用selenium + Python + Chrome 进行了一系列的爬虫.  最开始的想法是, 想每天爬取自己网易云音乐的一些数据, 比如每天听歌量, 之类的.  可以很轻松的利用selenium中的CSS selector 或者 XPath路径找到对应的HTML标签元素, 再通过鼠标等操作, 完成登陆, 进而爬取数据,  但是, 后...

  有了上一次网易云音乐的实践之后, 这一次轻车熟路, 制作了一个新浪微博头条榜的爬虫, 代码如下:#!/usr/bin/python #-*- coding: utf-8 -*-import reimport sysimport datetimefrom selenium import webdriverfrom time import sleepfrom selenium....