截止到19年,Hadoop 最新的版本已经出到 3.1.1 版本了,下面就以 该版本为例,详细分析分布式安装的步骤。Hadoop 有三种安装方式,包括:
1. 单机模式
2. 伪分布式模式
3. 分布式模式
零、准备工作
准备好需要安装 Hadoop 的机器,本文使用的是 4 台 centos 机器,分别是 node1, node2, node3 和 node4,需要预先准备好 Hadoop 的安装环境。
1. jdk安装配置
下载jdk文件至每台机器:
wget http://10.18.218.14/download/jdk-8u131-linux-x64.rpm
rpm -Uvh jdk-8u131-linux-x64.rpm
配置java的环境变量:
vim /etc/profile
增加:
export JAVA_HOME=/usr/java/jdk1.8.0_131
export PATH=$JAVA_HOME/bin:$PATH
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
保存后执行source /etc/profile