Spark1.5.1 编译与安装

1、下载

下载地址：

http://spark.apache.org/downloads.html

选择下载源码

2、源码编译

1）解压

tar -zxvf spark-1.5.1.tgz

2、编译

进入根目录下，采用make-distribution.sh进行编译。

cd spark-1.5.1

sudo ./make-distribution.sh --tgz--skip-java-test -Pyarn -Phadoop-2.2 -Dhadoop.version=2.2.0 -Phive -Phive-thriftserver

如果中间有报错，请重新跑，多试几次，一般都能成功。

其中大多会有JAVA_HOME的错误，所以需要在make-distribution.sh配置JAVA_HOME路径，在make-distribution.sh文件中添加：

exportJAVA_HOME=/usr/local/jdk1.7.0_03

编译成功后，其安装文件在根目录下：

spark-1.5.1-bin-2.2.0.tgz

编译成功后的界面：

3、安装

省略，和之前版本一样，就不写了。

启动成功后的界面：

转载请注明出处：

http://blog.youkuaiyun.com/sunbow0