Hadoop HA架构简述

1.HDFS HA架构

1.1.HDFS HA 架构图

架构图简述

如果nn是单节点部署，那么该nn节点挂了，就不能提供对外服务
所以需要部署两个nn(active nn + standby nn)，任何时候只有1台 active的nn对外，
另外一台是standby 做实时备份，随时准备standby --> active状态，对外提供服务
这个切换过程外界是无感知
两个nn节点通过jn(JournalNode)集群共享状态，通过ZKFC选举active，监控状态，自动备援。
DN(DataNode)会同时向两个NN节点发送心跳。

1.2各组件说明

• active nn(NameNode)

• 接收client的rpc请求并处理，同时自己editlog写一份，也向JN的共享存储上的editlog写一份。
• 接收DN的block report，block location updates 和 heartbeat

• standby nn(NameNode)

• 同样会接受到从JN的editlog上读取并执行这些log操作，使自己的NN的元数据和active nn的元数据是同步的，
• standby nn是active nn