
kafka
qermeng
这个作者很懒,什么都没留下…
展开
-
kafka基本概念
转载:https://www.cnblogs.com/likehua/p/3999538.html1、简介Kafka is a distributed,partitioned,replicated commit logservice。它提供了类似于JMS的特性,但是在设计实现上完全不同,此外它并不是JMS规范的实现。kafka对消息保存时根据Topic进行归类,发送消息者成为Producer,...转载 2018-11-26 15:13:42 · 151 阅读 · 0 评论 -
spring kafka事务处理
spring kafka事务处理You can use the KafkaTransactionManager with normal Spring transaction support (@Transactional, TransactionTemplate etc). If a transaction is active, any KafkaTemplate operations perf...转载 2018-11-27 18:57:03 · 1601 阅读 · 0 评论 -
kafka partition
这里写自定义目录标题kafka partitionkafka partition 一个topic 可以配置几个partition,produce发送的消息分发到不同的partition中 consumer接受数据的时候是按照group来接受,kafka确保每个partition只能同一个group中的同一个consumer消费,如果想要重复消费,那么需要其他的组来消费。 Zookeerpe...转载 2019-03-08 19:02:44 · 528 阅读 · 0 评论 -
kafka EOS
Kafka 0.11.0.0引入了EOS(exactly once semantics,精确一次处理语义)的特性,这个特性包括kafka幂等性和kafka事务两个属性。1)幂等producer 保证单个分区的只会发送一次,不会出现重复消息2)事务(transation):保证原子性的写入多个分区,即写入到多个分区的消息要么全部成功,要么全部回滚启用方法:1)启用幂等producer:在pr...转载 2019-03-30 14:13:20 · 875 阅读 · 0 评论 -
kafka事务状态
Server 端事务状态管理TransactionCoordinator 会维护相应的事务的状态信息(也就是 TxnStatus),对于一个事务,总共有以下几种状态:状态 状态码 说明Empty 0 Transaction has not existed yetOngoing 1 Transaction has started and ongoingPrepareCommit 2 Gro...转载 2019-05-05 17:40:23 · 858 阅读 · 0 评论