【Kafka面试】Kafka的高可用机制有了解吗?

文章介绍了Kafka的集群模式,强调了其高可用性。每个broker是Kafka实例,集群能抵御单点故障。分区备份机制中,leader副本负责数据同步,ISR确保数据完整性。当leader宕机,ISR中的follower会成为新leader,维持服务。配置ISR和普通副本平衡数据完整性和性能。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

一、集群模式

在这里插入图片描述

  • Kafka集群由多个broker组成,每个broker就是Kafka实例。
  • 假如某个broker宕机,在集群中其他的broker依然可以对外提供服务,这个就是集群能够保证高可用性。

二、分区备份机制

在这里插入图片描述

  • 分区提供了副本机制,一个分区可能存在多个副本,并且这些副本分别存储在不同的broker中
  • leader副本对外提供读写数据,同一个分区下的所有副本存储的内容是一样的。由leader负责把数据同步给其他follower。
  • 当某个分区的leader所在的broker宕机了,就会从其他的broker的follower中选举一个成为新的leader,继续对外服务。这样保证了系统的容错性和高可用性。

1. follower分类

在这里插入图片描述

  • ISR副本:in-sync-replica,需要同步复制保存的follower副本。标名为ISR的副本,leader在同步数据时,以同步请求方式。同步请求的数据更具有完整性,
  • 普通副本:普通副本,leader在同步数据时,以异步请求方式。异步请求无法保证完整性。
  • 如果leader宕机了,肯定是ISR中的副本更加接近leader中的数据

2. leader宕机,新的leader选举原则

在这里插入图片描述

  • ISR配置:在broker配置中,可以设定topic副本数量和ISR最少个数。根据实际情况设置。
  • ISR同步保存数据,性能不高,一般至少会设置1个ISR列表,其他的尽量设置为普通副本。保证高可用的前提下,数据的时效性
  • 选举时优先从ISR中选定,因为这个列表中的follower的数据是与leader同步的。
  • 如果ISR列表中的follower都不行了,就只能从其他的普通follower中选取。

三、总结

在这里插入图片描述
在这里插入图片描述

四、模拟面试

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值