
hadoop
山鬼谣me
我的这一生
展开
-
Spark 和 Hadoop 本地【window】环境搭建
环境Spark:2.3.1 Hadoop:2.7.6 java:1.8前言最近主要是在学习Spark,根据官网的文档,想本地跑个小程序看看效果;https://spark.apache.org/docs/latest/quick-start.html#self-contained-applications具体想执行的官方代码如下:/* SimpleApp.java ...原创 2018-06-20 13:13:13 · 1806 阅读 · 0 评论 -
大数据技术原理与应用 【笔记】
环境看视频: http://study.163.com/course/courseMain.htm?courseId=1002887002前言个人笔记 视频笔记正文大数据 思路的转变:全样而非抽样 效率而非精确 相关而非因果核心技术分布式存储 和 分布式处理云计算解决了:分布式存储 、 分布式处理、虚拟化和多租户;HadoopYARN 简称“样...原创 2018-06-27 18:09:15 · 1109 阅读 · 0 评论