王伟王胖胖的博客

kafka知识点总结Kafka基本架构图基本概念以及作用副本同步概念如何保证副本数据一致性kafka存储机制Partition 文件存储方式如何找到消息Kafka基本架构图基本概念以及作用Producer： 消息生产者，向 Kafka 集群发消息的客户端。Consumer： 消息消费者，从 Kafka 集群啦取消息的客户端。Consumer Group： 消费者组（CG），消费者组内每个消费者负责消费不同分区的数据，提高消费能力。一个分区只能由组内一个消费者消费，消费者组之间互不影响。所有的消

kafka相关总结Kafka相关一.特点1.应用解耦2.异步处理2.1 串行方式大约30ms。2.2 并行方式大约20ms。3.数据限流4.消息通信二.结构0. 元数据(集群节点信息，分区信息，主题和分区关系等)1.生产者1.1相关重要配置1.1.1 acks确认机制:1.1.2 buffer-memory缓冲区大小1.1.3 batch-size发送批次大小1.1.4 linger.ms设置延迟多久要发送，类似于TCP的nagal算法1.1.5 retries重试次数和retries.backoff.ms