weixin_41734687的博客

1. 日志采集框架Flume1.1 Flume介绍1.1.1 概述Flume是一个数据搬运工，侧重于数据的搬运，而不是数据处理Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统。Flume可以采集文件，socket数据包等各种形式源数据，又可以将采集到的数据输出到HDFS、hbase、hive、kafka等众多外部存储系统中一般的采集需求，通过对flume的简单配...

完全引用原文原文channeltypehdfspath写入hdfs的路径，需要包含文件系统标识，比如hdfs://namenode/flume/webdata/可以使用flume提供的日期及%{host}表达式。filePrefix默认值：FlumeData写入hdfs的文件名前缀，可以使用flume提供的日期及%{host}表达式。fileSuffix写...