
消息系统
sunrising_hill
这个作者很懒,什么都没留下…
展开
-
kafka-eagle安装
1、首先去官网下载eaglehttp://download.kafka-eagle.org/2、上传至服务器,解压到安装目录,我使用的是1.4.4版本tar -xzf kafka-eagle-bin-1.4.4.tar.gz -C /apps/cd /appsmv kafka-eagle-bin-1.4.4 eagle3、修改/etc/bashrc,添加下面环境变量ex...原创 2020-02-24 18:42:46 · 1620 阅读 · 3 评论 -
Kafka Server.properties
基础配置:broker.idBroker的ID,每个broker必须又有唯一的值。delete.topic.enableTopic是否删除过期日志的开关,默认关闭。Socket服务器配置:listenersSocket服务器监听的地址,如果没有设置,则监听java.net.InetAddress.getCanonicalHos原创 2017-10-09 16:26:41 · 2035 阅读 · 0 评论 -
flume hdfs文件输出普通文本 正确行数
本次调试flume读取kafka数据输出至hdfs总是内容不对,使用fs -cat查看行数不对,经过测试后发现需要如下配置:agent.sources = midlogagent.channels = hdfsChannelagent.sinks = hdfsSink# the source of hdfsagent.sources.midlog.type = org.apache....原创 2018-09-21 13:48:40 · 826 阅读 · 0 评论