
kafka
TreeCode
我喜欢种树
展开
-
Kafka根据时间戳消费数据并返回最近的十条
根据时间戳消费kafka topic数据并返回最近十条。原创 2023-02-22 21:06:58 · 2661 阅读 · 1 评论 -
kafka ack机制/出现故障数据同步问题
kafka的ack有三种:0:producer不等待broker的ack,这一操作提供了一个最低的延迟,broker一接收到还没有写入磁盘就已经返回,当broker故障时有可能丢失数据;例如:当leader挂了,producer仍然往这个leader发送消息,就会造成数据丢失1:producer等待broker 的ack,partition的leader落盘成功后返回ack,如果在 follower同步成功之前leader 故障,那么将会丢失数据;例如:当leader已经将收到的数据写入磁盘然后原创 2021-03-22 18:21:37 · 1017 阅读 · 0 评论