
kafka
matao_jack
没有什么可以打败我,除非是我自己不想成功
展开
-
kafka保证数据一致性机制
为保证 producer 发送的数据,能可靠的发送到指定的 topic,topic 的每个 partition 收到producer 发送的数据后,都需要向 producer 发送 ack(acknowledgement 确认收到),如果producer 收到 ack,就会进行下一轮的发送,否则重新发送数 ...原创 2019-10-30 16:22:46 · 1730 阅读 · 1 评论 -
kafka工作流程以及文件存储机制
Kafka 中消息是以** topic** 进行分类的, 生产者生产消息,消费者消费消息,都是面向 topic的。topic 是逻辑上的概念,而 partition 是物理上的概念,每个 partition 对应于一个 log 文件,该 log 文件中存储的就是 producer 生产的数据。Producer 生产的数据会被不断追加到该og 文件末端,且每条数据都有自己的 offset。消费者组...原创 2019-10-29 15:59:04 · 466 阅读 · 0 评论 -
kafka
1、Kafka是个什么东西 – kafka是一个高吞吐的分部式消息系统 2、消息列队常见场景 • 系统之间解耦合 • 峰值压力缓冲 • 异步通信 3、kafka架构 producer:生产者 consumer:消费者 broker:kafka集群的server,负责处理消息的读、写请求,存储信息 topic:消息队列/分类 4、kafka的消息存储和生产消费模型 (1)一个topic分成多个pa...原创 2019-08-24 22:15:06 · 981 阅读 · 0 评论