Kafka Broker是如何工作的?

Zookeeper与Kafka集成:Broker的注册与领导选举流程,
本文详细解释了KafkaBroker如何通过Zookeeper进行注册、控制器的角色、领导选举规则,以及Zookeeper在集群管理中的作用,包括故障转移过程。

这里会有一个问题就是我们部署了zookeeper,那他是怎么结合起来的?

首先,

1.broker启动后会在zookeeper注册。

2.然后broker中会有controller,controller谁先注册谁成为leader。

3.这个controller的作用是监听brokers/ids。

4.监听完成之后就要选取leader。这里讲一下选取规则:在isr中存活为前提,然后选取AR中排在前面的有限,例如ar[1,0,2],isr[1,0,2],那么leader就会按照1,0,2的顺序进行轮询。

5.controller会将leader信息和isr信息上传到zookeeper里面。

6.然后其他节点controller同步相关信息(这里为什么要这么做),是因为controller节点(leader)挂了,其他的controller直接上位。

7.如果leader挂了怎么办,controller监听到了ids,然后重新选举leader,将新的leader信息以及isr信息上传。这是broker的整个工作流程。

接着回答一下zookeeper和kafka怎么联系起来的,这是broker启动会将自己的注册信息上传到zookeeper,然后controller监听变化,以及选举完成之后,将leader信息上传上去以及isr信息。

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值