荒野之鹰

最近迷上了爬虫，项目也不忙··于是想了想，弄个爬虫统计下豆瓣用户的分布吧还是用java··python还没有学好··关键是··我觉得java比较强大。 原理，手动输入一个用户主页，然后爬出这个用户关注的人，然后递归，就像搜索引擎的原理一样。技术： mysql ，spring boot， thymeleaf ，echarts。爬虫效率很低，因为五秒钟请求一次，不能请求太频繁，否则··

爬取网易云音乐的歌曲评论最开始接触爬虫是在17年的时候了，那时候都毕业两年了，醉心于linux啊，java等技术，没有具体写过爬虫，直到又一次项目需求，才用到了爬虫，当时用的jsoup，哈哈，就是简单的爬取静态网页，然后分析罢了。当时也想爬点有趣的东西，比如网易云音乐的评论··但是我太菜了，当时用java+PhantomJS 也没有成功，一年多以后终于成功了。但是当时没写博客，今天忽然想起那时候...