超级会员免费看
本文详细介绍了如何在Centos-6.8环境下，使用Scala-2.11.8和Jdk-1.8编译Spark-2.3.0-SNAPSHOT源码。通过Maven-3.3.9执行不同命令进行编译，并提供防止内存溢出的设置。编译完成后，可以引用编译后的Spark API到Maven项目中。
如何编译从Github上下载的Spark源码，然后使用Spark的Api?
本文将先介绍编译Spark最新源码的步骤，供参考。
一、环境准备
Centos-6.8
Scala-2.11.8
Jdk-1.8
Spark-2.3.0-SNAPSHOT(git clone https://github.com/apache/spark.git)
Python-2.7.10
Maven-3.3.9
订阅专栏 解锁全文
扫一扫
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
