
Flume
TURING.DT
科技改变世界,技术改变人生。
展开
-
flume 1.6配置实践
Flume NG节点组成图: 此博文配置方法,将/var/log/hadoop/hdfs里面的文件重命名为x.COMPLETED,建议将建立一个flume收集日志的目录如abc,将要处理的log cp到这个abc,实际的配置配上abc的目录,之后定时删除.COMPLETED结尾的文件。说明:server5收集日志信息传送到server4,server4将数据上传到hdf原创 2016-04-13 14:30:03 · 584 阅读 · 0 评论 -
cdh5.5.1 配置启动flume
一、如何使用flume在CDH界面添加服务,选择flume之后选择主机,flume服务就启动了,下面就是配置参数二、关于配置文件有些网友在配置flume的时候,配置文件保存正常没有报错,但是hdfs上就没有数据,原因是因为,CDH的 cloudera-monitor.properties里配置agent_name,所以我们配置的时候需要使用这个名字,cloudera-m原创 2016-08-11 16:15:22 · 4973 阅读 · 0 评论