
spark
m风之伤
这个作者很懒,什么都没留下…
展开
-
zookeeper 在kafka中的作用是什么?
Kafka使用zk的分布式协调服务,将生产者,消费者,消息储存(broker,用于存储信息,消息读写等)结合在一起。同时借助zk,kafka能够将生产者,消费者和broker在内的所有组件在无状态的条件下建立起生产者和消费者的订阅关系,实现生产者的负载均衡。 1. broker在zk中注册 kafka的每个broker(相当于一个节点,相当于一个机器)在启动时,都会在zk中注册,告诉zk其br...转载 2019-02-20 16:48:46 · 2136 阅读 · 1 评论 -
Kafka的ACK机制有三种,是哪三种
Kafka producer有三种ack机制 初始化producer时在config中进行配置 0 意味着producer不等待broker同步完成的确认,继续发送下一条(批)信息 提供了最低的延迟。但是最弱的持久性,当服务器发生故障时,就很可能发生数据丢失。例如leader已经死亡,producer不知情,还会继续发送消息broker接收不到数据就会数据丢失 1 意味着produc...原创 2019-02-20 16:53:26 · 19519 阅读 · 0 评论