
flume
IT社团
这个作者很懒,什么都没留下…
展开
-
Flume环境搭建及主要的对接示例(超详细)
1.Flume简介1. Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。2. 支持在日志系统中定制各类数据发送方,用于收集数据;3. 同时,Flume提供对数据进行简单处理,并写到各种数据接受方(比如文本、HDFS、Hbase等)的能力。4. 名词介绍:Flume OG:Flume original generation,即Flume0.9x版本Flu...原创 2019-05-12 10:34:18 · 467 阅读 · 0 评论 -
flume下沉hdfs、hbase、avro、kafka示例
1.flume数据下沉之hdfs目录可以将channel中的数据最终保存到hdfs中,配置文件如下:####################################################################### 监听文件中的新增数据## 使用文件做为channel## this agent is consists of source which is r1...原创 2019-05-12 15:07:18 · 551 阅读 · 0 评论