
Kafka
Z_Data
大学计算机专业老师一枚,高级开发工程师,专注大数据相关技术分享,实战项目开发。
展开
-
Kafka中一些重要的组件的注意事项
Kafka中一些重要的组件的注意事项 Producer(生产者) --生产者负责采集数据并把数据传输到kafka的某个topic中。比如:flum、java后台服务、shell脚本、logstash –生产者是由多个进程组成的(可以有多个生产者组成)。一个生产者可以作为一个独立的进程,可以独立的分发数据 ...转载 2018-11-13 09:39:46 · 954 阅读 · 0 评论 -
kafka常见问题
#kafka常见问题 V2 1、如果想消费已经被消费过的数据 consumer是底层采用的是一个阻塞队列,只要一有producer生产数据,那consumer就会将数据消费。当然这里会产生一个很严重的问题,如果你重启一消费者程序,那你连一条数据都抓不到,但是log文件中明明可以看到所有数据都好好的存在。换...转载 2018-11-13 09:42:10 · 481 阅读 · 0 评论