Spark完全分布式集群搭建

一、准备工作

1. 安装jdk:https://blog.youkuaiyun.com/qq_42668255/article/details/97368887
2. 搭建hadoop集群：https://blog.youkuaiyun.com/qq_42668255/article/details/99449114
3. scala搭建  官方下载地址：https://www.scala-lang.org/download/
4. spark下载地址：http://spark.apache.org/downloads.html
5. 本人云盘资料(scala,spark以及spark源码软件资料)：https://pan.baidu.com/s/1VGmO8ahlkFrJShab0cYv0Q 提取码:mhnm

二、安装配置scala

1. 把安装包上传到服务器并解压   命令: tar -xzvf scala-2.13.0.tar.gz
2. 配置环境变量（根据自己的安装位置来，如下是本人安装位置）

export SCALA_HOME=/u