Hadoop高可用HDFS集群搭建详解

说明：

Hadoop高可用ＨＤＦＳ集群搭建步骤详解，在搭建的过程中会出现各种各样的问题，大家要养成看日志的习惯，大部分错误在启动或者 搭建的过程中都会在日志中体现，（由于日志信息过多，一般错误会在日志最后部分出现建议使用ｔａｉｌ命令查看日志，注意不要粘贴命令，格式问题）

集群图表：

步骤１：准备工作

• 保证网络可以ｐｉｎｇ通
• hosts文件要修改（也可不修）
• 防火墙关闭
• -

关闭防火墙方法：
1) 重启后生效
开启： chkconfig iptables on
关闭： chkconfig iptables off
2) 即时生效，重启后失效
开启： service iptables start
关闭： service iptables stop

步骤２：同步时间（可选择，建议同步）

确保安装了ntpdate，
没安装的话使用命令进行安装：yum install ntpdate
然后执行命令：ntpdate 132.163.4.101

步骤３：进行免密钥设置

每一台NN 需要免密钥登录到集群当中其他的机器
两台NN之间一定要做免密钥：
node1到node1~4　 做免密钥
node2到node1~4　做免密钥

• ①在node1节点生成密钥
  ssh-keygen -t dsa -P ” -f ~/.ssh/id_dsa

• ②cd到密钥所在的文件夹目录下:cd ~/.ssh/id_dsa，将生成的密钥拷贝到所有需要免密钥登陆的节点上，如：
  scp id_dsa.pub node2:/tmp
  scp id_dsa.pub node3:/tmp
  scp id_dsa