
笔记
文章平均质量分 96
-雾蓝-
无
展开
-
全国大学生大数据技能竞赛——基于Scala和Echart的大数据分析与挖掘
基于Scala和Echart的大数据分析与挖掘题目三:大数据分析与挖掘案例Spark基站统计分析Scala语法基础数据读取1.读取文件数据(1)按行读取(2)按字符读取2.写入数据数据切割数据过滤数据解析数据缓存分组聚合分组 | groupBy聚合操作数据可视化Echarts 题目三:大数据分析与挖掘案例 搜狗实验室提供【用户查询日志(SogouQ)】数据 数据:本项目是对日志数据; 要求:搜索关键字进行统计,可以作为热点词汇来帮助用户快速查询相关信息;并且针对用户点击数进行统计分析,可以作为搜索引擎搜索效原创 2021-11-24 08:12:14 · 3131 阅读 · 0 评论 -
全国大学生大数据技能竞赛 —— 分布式平台搭建(待更)
全国大学生大数据技能竞赛 —— 分布式平台搭建基础部分 一、基础搭建 1、更改主机名 2、配置hosts文件(三台机器都要执行) 二、安装JDK 三、安装zookeeper 四、安装hadoop 五、安装hbase 六、安装hive 提高部分 七、Spark安装原创 2021-08-13 16:31:31 · 1885 阅读 · 0 评论