白飞飞_Alan

1、  Spark发展背景Spark由加州大学伯克利分校AMP实验室(Algorithms,Machines,andPeopleLab)以Matei为主的小团队使用Scala语言所开发，后期成立spark商业公司databricks，CEOAli，CTO Matei,后期愿景是实现databrickscloud。Spark是新一代基于内存迭代计算的、开源的、分布式的、并行的计算框架，抛去繁琐的

1、下载spark源码解压到目录/usr/local/spark-1.5.0-cdh5.5.1，看看是否有pom.xml文件2、切换到目录/usr/local/spark-1.5.0-cdh5.5.1执行：编译spark源代码的时候，需要从网上下载依赖包，所以整个编译过程机器必须保证在联网状态。编译执行如下脚本：[hadoop@hadoop spark-1.5.0-cdh5.5