WQY992的博客

版本选型spark2.1.2 ， 依赖scala2.11.8安装部署下载spark-2.1.2-bin-hadoop2.7.tgz解压安装：进入需要安装的目录 cd /home/wyc/apps 通过共享文件夹，将安装包拷贝进入虚拟机 cp /mnt/hgfs/sharefile/apache-spark/spark-2.1.2-bin-hadoop2.7.t...

Cluster模式standalone，Yarn，Messos（国内很少用）说明如果现有的集群框架中存在MR的相关应用，同时相关的MR无法转换为Spark应用的，集群选型为Spark On Yarn；如果现有的集群框架中只有Spark应用，那么建议采用spark Standalone模式；spark可以运行在不同的计算引擎上，所以集群模式安装分不同种情况：说明：spark的Stand...