
kafka
A_ChunUnique
大数据爱好者
展开
-
自定义添加KAFKA服务启动时报错
自定义添加kafka服务参考地址 kafka安装kafka parcels版本如下:(下载地址 download)KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel KAFKA-2.2.0-1.2.2.0.p0.68-el6.parcel.sha manifest.jsonCDH自定添加kafka服务启动报如下错误 查看stderr:错误日志会发现OOM错误+ grep -原创 2017-11-16 11:44:19 · 1023 阅读 · 0 评论 -
DN日志--Flume--Kafka
一、Flume收集的DN日志作为Kafka的生产数据,exec-memory-kafka.conf如下 a1.sources = r1 a1.sinks = k1 a1.channels = c1 a1.sources.r1.type = com.onlinelog.analysis.ExecSource_JSON a1.sources.r1.command = tail -F /var/lo原创 2018-01-18 17:27:07 · 385 阅读 · 0 评论 -
kafka eagle安装与使用
一、概述 在开发工作当中,在使用 Kafka 集群进行消息的生产和消费时,数据的变动以及topic的管理是我们所关心的内容,这就要求一套行之有效的监控管理体系。常见的kafka监控软件有4种如下所示 Kafka Web Conslole :监控功能较为全面,可以预览消息,监控Offset、Lag等信息,但存在bug,不建议在生产环境中使用。 Kafka Manager:偏向Kafka集群...转载 2018-03-12 19:10:58 · 2759 阅读 · 0 评论