White_Lee的专栏

一、简单测试配置信息 flume-ng启动agent的命令为： $ bin/flume-ng agent -n $agent_name -c conf -f conf/flume-conf.properties.template 添加如下配置文件 example.conf # example.conf: A single-node Flume configuration # N...

最近在用Flume做数据的收集。用到了里面的Spooldir的源在使用中有如下的问题： 如果文件的某一行有乱码，不符合指定的编码规范，那么flume会抛出一个exception，然后就停在那儿了。 spooldir指定的文件夹中的文件一旦被修改，flume就会抛出一个exception，然后停在那儿了。 其实，flume的最大问题就是不够鲁棒。一旦出现问题，不能跳过，只能死在那儿。不知道...