
Flume
sj206327327206
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Flume 之Avro RPC 调用失败记录
flume-ng-sdk-1.8.0.jar 中依赖的jar 是 avro-1.7.4.jar,如果把avro 包换成最新的avro-1.8.2.jar 会导致Avro RPC client发送消息时失败,失败的异常如下:Caused by: java.util.concurrent.ExecutionException: java.lang.AbstractMethodError: org.ap原创 2018-01-18 16:20:10 · 2540 阅读 · 0 评论 -
Flume 使用场景记录
Flume用来收集日志信息,这里记录以下使用场景:场景一:使用avro source ,memory,logger 将收集到的日志打印在标准输出,适合测试。场景二:使用avro source,kafka channel,hdfs 将日志以"Flume Event" Avro Event Serializer 的形式保存在hdfs上,这种方式生成的.avro文件中的每一条记录的字段中包含header...原创 2018-02-09 21:43:38 · 1973 阅读 · 0 评论