
Spark
zhongwen7710
这个作者很懒,什么都没留下…
展开
-
Spark学习资料汇总
Pivotal Hadoop Integrates the Full Apache Spark StackMay 23, 2014 | by Sarabjeet Chugh, Head of Hadoop Product Management, Pivotal, Inc.Tags:http://databricks.com/blog/2014/05/23/pivotal-had原创 2014-12-01 23:27:01 · 1426 阅读 · 0 评论 -
Scala开发入门教程【整理来自引路蜂Blog】
Scala语言和其它语言比如Java相比,算是一个比较复杂的语言,它是一个面向对象和面向函数的统一体,使用起来非常灵活,因此也不容易掌握,前面的58篇文章仅仅是Scala的一个入门教程,有了这些基础知识,你就可以开始编写Scala应用,学习一种语言最好的方法是通过实践来学习。为方便起见,下面列出这些文章,后面我们就分专题进一步介绍Scala编程。Scala开发教程(1): 开始神奇原创 2015-01-14 20:47:28 · 1421 阅读 · 1 评论 -
2014 Spark美国峰会顶级数据商精彩PPT分享
Spark是一个基于内存计算的开源的集群计算系统,目的是让数据分析更加快速。Spark非常小巧玲珑,由加州伯克利大学AMP实验室的Matei为主的小团队所开发。使用的语言是Scala,项目的核心部分的代码只有63个Scala文件,非常短小精悍。 Spark 是一种与 Hadoop 相似的开源集群计算环境,但是两者之间还存在一些不同之处,它们使 Spark 在某些工作负载方面表现得更加优,换句话说,原创 2015-01-22 14:49:37 · 1139 阅读 · 0 评论 -
【转自oschina网站】Hadoop、Pig、Hive、Storm、NOSQL 学习资源收集
目录[-](一)hadoop 相关安装部署(二)hive(三)pig(四)hadoop原理与编码(五)数据仓库与挖掘(六)Oozie工作流(七)HBase(八)flume(九)sqoop(十)ZooKeeper(十一)NOSQL(十二)Hadoop 监控与管理(十三)Storm(十四)YARN & Hadoop 2.0(十五)ha转载 2015-01-04 22:09:40 · 2293 阅读 · 2 评论 -
用IDEA创建sbt的Scala工程
Spark源码是有Scala语言写成的,目前,IDEA对Scala的支持要比eclipse要好,大多数人会选在在IDEA上完成Spark平台应用的开发。下面我们以IDEA创建一个Scala项目。 实验环境准备:l JDK: Java 语言的软件开发工具包(SDK)参考网址: http://www.oracle.com/technetwork/java/javase/downloa原创 2015-01-04 21:34:28 · 5441 阅读 · 0 评论 -
用Windows7+IDEA+SBT搭建Spark源代码调试与阅读环境
Spark源码是有Scala语言写成的,目前,IDEA对Scala的支持要比eclipse要好,大多数人会选在在IDEA上完成Spark平台应用的开发。因此,Spark源码阅读的IDE理所当然的选择了IDEA。今天将与大家分型Windows7+IDEA+SBT搭建Spark源代码调试与阅读环境。 实验环境准备:l JDK: Java 语言的软件开发工具包(SDK)参考网址: ht原创 2015-01-04 21:48:55 · 7604 阅读 · 0 评论 -
用Eclipse构建Spark源代码调试阅读环境
实验环境准备:l JDK: Java 语言的软件开发工具包(SDK)参考网址: http://www.oracle.com/technetwork/java/javase/downloads/index.htmll SaclaIDE:一个基于Eclipse开发的Scala的集成开发软件。(可直接用)参考网址:http://scala-ide.org/l Scala:Spa原创 2015-01-04 21:26:37 · 7579 阅读 · 0 评论