Hadoop集群搭建

**

Hadoop集群搭建

**
需要3台以上虚拟设备，通过克隆方式创建4个虚拟机。

1、修改克隆虚拟机IP

修改完之后重启服务， 使用ipaddr查看IP配置信息是否修改成功。
2、修改克隆虚拟机hosts

3、修改克隆虚拟机的hostname

查看一下路径是否存在data文件，有先删除。

使用命令rm -fr data/ 删除data文件

使用scp命令将BD03上已经配置好hadoop包发到BD04上。
配置免密登陆：
ssh-keygen：生产密钥
ssh-copy-id BD01每台都要执行，把密码发到每个节点上。（将本节点的密钥发送到BD01）
使用cd /root/.ssh/查看密钥是否都有发送过来。
修改配置以下文件：(每个节点都一样)
/opt/module/hadoop-2.8.4/etc/hadoop/core-site.xml

/opt/module/hadoop-2.8.4/etc/hadoop/hdfs-site.xml

/opt/module/hadoop-2.8.4/etc/hadoop/mapred-site.xml

使用：hadoop namenode -format进行格式化。
格式过程中未出现error则代表格式化成功。

在节点1进行启动服务测试：
start-dfs.sh

在节点2进行yarn服务启动

使用jps查看进程。

进入一下界面进行测试：
http://192.168.1.123:50070