伪分布式hadoop+spark+scala 超详细搭建

目录

安装伪分布式hadoop

安装 JAVA 环境

实现免密登陆

Hadoop环境的安装与配置

安装伪分布式spark

 安装伪分布式scala

---

安装伪分布式hadoop

安装 JAVA 环境

步骤一：下载 JDK 安装包（jdk-8u152-linuxx64.tar.gz）

官网地址：https://www.oracle.com/java /technologies /javase-jdk8-downloads.html

步骤二：卸载自带 OpenJDK

[root@master ~]# rpm -qa | grep java

卸载相关服务，键入命令 rpm –e –-nodeps 删除的包

 [root@master ~]# rpm -qa | grep java

[root@master ~]# java --version

bash: java: 未找到命令

步骤三：安装 JDK

安装命令如下，将安装包解压到/usr/local/src 目录下，将安装包放在了root目录下

[root@master ~]# tar -zxvf jdk-8u152-linux-x64.tar.gz -C /usr/local/src/

[root@master ~]# ls /usr/local/src/
jdk1.8.0_152

步骤四：设置 JAVA 环境变量

[root@master ~]# vi /etc/profile

在文件的最后增加如下两行：

export JAVA_HOME=/usr/local/src/jdk1.8.0_152