hadoop 配置Hadoop集群，Ubuntu16.04

一台主要的计算机master，在HDFS中担任NAMENODE 在mapreduce2担任RESOURCEMANAGER的角色

1、配置data1虚拟机

ssh data1
 

sudo rm -rf /usr/local/hadoop/tmp/dfs
 

删除文件夹下的内容

mkdir -p /usr/local/hadoop/tmp/dfs/data
 

修改拥有者

sudo chown -R hadoop:hadoop /usr/local/hadoop/
 

退出链接

exit

重复以上的动作,逐一修改data2 data3

回到master本机，继续进行操作

注意文件夹的名字

全部设置完成之后，格式化目录 NameNode HDFS

./bin/hdfs namenode -format
 

成功之后的截图

 

拖到最后，出现successfully说明成功

同时启动HDFS和YARN：

 ./sbin/start-all.sh

 

查看master（NaneNode）的进程是否启动

HDFS的功能：NameNode，secondaryNameNode

YARN的功能:RESOURCEMANAGER

链接到data1，查看DATA1服务器的状态

看到data1的DataNode已经启动