咸鱼的博客

股票爬虫（第二篇：代码实现）文章目录股票爬虫（第二篇：代码实现）前言准备1、新建Maven项目2、需要的依赖、包代码编写1、获取网页返给我们的json2、太乱了，看的眼疼（那就数据清洗一下）3、数据的二次清洗，把数组进行格式化4、完美5、最后转换成csv文件完整代码打开csv文件，数据呈现确认信息含义你把鼠标放到网页图标上，然后再对应json信息即可前言​ 写爬虫程序，大家都知道python，其实还有java可以写爬虫，由于博主是大数据分析专业的，而大数据很多框架都和java有关系，所以本篇的代码实现

文章目录股票爬虫（第一篇）1 前言2 分析网页第一步：进入到需要爬取信息的页面image-20210423090826019第二步：打开Chrome的调试工具（F12）第三步：看看网页会给你发什么消息刷新网页，等待下图不动了再操作在此页面点击日K观察控制台选取逐步、逐个分析，直到……直到你找到想要的信息找到了！第四步：查看请求头，并分析URLURL分析最后清洗出来的URL是这样的股票爬虫下一篇：编写代码，开始贪婪地获取吧股票爬虫（第一篇）1 前言​ 本教程仅为学习研究，请勿拿去干坏事。博主是大数据分析