
kafka
我爱吻篮板
每天学习一点点
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Kafka储存位置解析
参考地址:https://blog.youkuaiyun.com/jewes/article/details/42970799转载 2018-05-08 10:06:53 · 3077 阅读 · 0 评论 -
springboot和kafka结合其中enable.auto.commit等于false失效
事件描述公司使用的是Spring Cloud工作的微服务框架。其中做了SpringBoot和kafka的结合。但是意外的是enable.auto.commit参数设置成了false,kafka的offset依然提交了(也没有进行人工提交offset)。为了验证这个是否为真实情况,首先测试环境启动项目,enable.auto.commit设置为false。首先记录测试topic的偏移量和logs...原创 2018-06-22 18:10:57 · 29545 阅读 · 16 评论 -
Kafka的备份机制
kafka的备份策略Kafka的备份的单元是partition,也就是每个partition都都会有leader partiton和follow partiton。其中leader partition是用来进行和producer进行写交互,follow从leader副本进行拉数据进行同步,从而保证数据的冗余,防止数据丢失的目的。 如图: follow副本是如何实现和leader副本进行...原创 2018-06-26 20:11:58 · 8318 阅读 · 0 评论 -
kafka源码导入idea
必备工具Win10Jdk1.8Zookeeper-3.4.10Scala- 2.12.5Gradle 3.3kafka-0.10.1.0-src准备以上环境请自行百度^-^,接下来就开始让我们用idea编译(ps:我用Gradle命令编译源码,然后再导入idea没有成功)。idea配置环境idea配置Scala环境:如图 由于我是装了scala的我就不卸载了。id...原创 2018-06-27 19:11:50 · 3027 阅读 · 0 评论