HDFS使用QJM实现高可用(一)

本文介绍QJM(Quorum Journal Manager)的基本原理及其如何用于实现Hadoop集群的高可用性(HA)。通过2N+1台JournalNode存储EditLog,确保数据的安全性与一致性。文章还探讨了使用QJM作为HA解决方案的优势,包括简化配置、内置fencing功能、消除单点故障等。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

QJM的基本原理就是用2N+1台JournalNode存储EditLog,每次写数据操作有大多数(>=N+1)返回成功时即认为该次写成功,数据不会丢失了。当然这个算法所能容忍的是最多有N台机器挂掉,如果多于N台挂掉,这个算法就失效了。
第一部分
1.使用QJM来实现HA已经成为开源版的默认HA方案,那么,为什么用QJM的方式来实现HA?
1)不需要配置额外的高共享存储,降低了复杂度和维护成本;
2)不在需要单独配置fencing实现,QJM本身内置了fencing的功能;
3)不存在Single Point Of Failure;
4)系统健壮性强;
2.
未完待续
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值