
大数据实训
文章平均质量分 90
基于Hadoop的岗位分析
清风--明月
这个作者很懒,什么都没留下…
展开
-
数据可视化
【代码】数据可视化。原创 2022-10-20 00:00:00 · 774 阅读 · 0 评论 -
设计hive数据仓库进行数据分析
【代码】设计hive数据仓库进行数据分析。原创 2022-10-18 23:27:21 · 1706 阅读 · 2 评论 -
使用MapReduce进行数据预处理
南京,15-30,年底双薪-技能培训-免费班车-带薪年假-六险一金 通讯补助 大平台 核心部,Hadoop-Spark-MySQL-Hive。上海,15-25,带薪年假-五险一金-节日礼物-定期体检-全面福利体系work life blanc,null。北京,25-45,扁平管理-弹性工作-就近租房补贴-六险一金-六险一金弹性工作免费三餐租房补,null。上海,22-32,年底双薪-专项奖金-股票期权-年终分红-不内卷加班,null。杭州,15-25,绩效奖金-专项奖金-扁平管理-扁平化管,null。原创 2022-10-18 20:40:03 · 1836 阅读 · 0 评论 -
使用IDEA进行数据采集
3.编写封装存储在HDFS数据工具类(HttpClientHdfsUtils.java)1.编写响应结果JavaBean类(HttpClientResp.java)2.编写封装HTTP请求工具类(HttpClientUtils.java)3.复制请求头和响应头(各个浏览器有些许差异,以自己使用的浏览器为准)4.实现网页数据采集(HttpClientData.java)//使用hdfs命令查看数据列表。//使用hdfs命令查看一个数据。3.查看数据(网页)原创 2022-10-10 20:35:45 · 1994 阅读 · 0 评论 -
搭建大数据集群环境
实验环境准备操作系统:centos7所需实验包:所需架包:三台裸机(最小安装)IP。原创 2022-10-09 15:21:46 · 1027 阅读 · 0 评论