欢迎来到李奇峰的数据世界

Kafka副本管理—— 为何去掉replica.lag.max.messages参数https://www.cnblogs.com/huxi2b/p/5903354.htmlkafka的副本数据的同步原理https://blog.youkuaiyun.com/madongyu1259892936/article/details/99596335Kafka水位(high watermark)与leader epoch的讨论https://www.cnblogs.com/huxi2b/p/7453543.html

Kafka数据写入流程1、确定集群暴露地址1、确定集群暴露地址在进行Kafka数据写入的过程中，首先第一步需要先确定Kafka集群对外暴露的地址。也许你可能会有疑惑，Kafka的地址还需要确认？不是直接kafka_ip:9092就可以了吗？稍等稍等，你也许对Kafka的地址了解的没有那么多。在Kafka中有两个参数：listeners和advertised.listenerslisteners：用来定义Kafka Broker的本机监听地址，如果没有设置，默认使用本机的hostname:9092

大数据最全知识点整理-Kafka篇导语1、 kafka 是什么？有什么作用？2、Kafka为什么这么快3、Kafka架构及名词解释4、Kafka中的AR、ISR、OSR代表什么？5、HW、LEO代表什么？6、ISR收缩性：7、kafka follower如何与leader同步数据8、Zookeeper 在 Kafka 中的作用（早期）9、Kafka如何快速读取指定offset的消息？10、生产者发送消息有哪些模式？11、发送消息的分区策略有哪些？12、Kafka可靠性保证（不丢消息）13、Kafka 是怎么

文章目录导语Controller（控制器）知识点什么是ControllerController选举过程元数据内容Controller主要作用：故障转移脑裂问题导语在kafka暴露公网的过程中，遇到了一些例如元数据无法获取、生产者无法正常发送数据等问题在不断查找资料的过程中，详细深入了解了kafka的网络、数据发送过程、controller、leader等概念，并合理应用以上知识点顺利将kafka进行公网暴露。Controller（控制器）知识点在前期的公网暴露测试过程中，只是随机将kafka