本文介绍了Hadoop HDFS的高可用性（HA）和高扩展性（Federation）。HA通过主备NameNode实现故障切换，确保集群稳定性。Federation通过多个NameNode分管不同命名空间，解决单点内存限制问题，提高扩展性和性能。文章详细阐述了HA的JournalNodes、Zookeeper在切换中的作用，以及Federation的目录隔离和存储能力提升。
一、HDFS的高可用和高扩展
针对目前这个一主两从的集群
我们前面分析了NameNode负责接收用户的操作请求，所有的读写请求都会经过它，如果它挂了怎么办？
这个时候集群是不是就无法正常提供服务了？是的，那现在我们这个集群就太不稳定了，因为NameNode只有一个，是存在单点故障的，咱们在现实生活中，例如，县长，是有正的和副的，这样就是为了解决当正县长遇到出差的时候，副县长可以顶上去。
所以在HDFS的设计中，NameNode也是可以支持多个的，一个主的 多个备用的，，当主的挂掉了，备用的可以顶上去，这样就可以解决NameNode节点宕机导致的单点故障问题了，也就实现了HDFS的高可用
还有一个问题是，前面我们说了NameNode节点的内存是有限的，只能存储有限的文件个数，那使用一个主NameNode，多个备用的NameNode能解决这个问题吗？
不能！
一个主NameNode，多个备用的NameNode的方案只能解决NameNode的单点故障问题，无法解决单个NameNode内存不够用的问题，那怎么办呢？不用担心，官方提供了Federation机制，可以翻译为联邦
订阅专栏 解锁全文
扫一扫
654
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
