qq_16177481的博客

本人在测试hdfs的sink，发现sink端的文件滚动配置项起不到任何作用，配置如下：a1.sinks.k1.type=hdfsa1.sinks.k1.channel=c1a1.sinks.k1.hdfs.useLocalTimeStamp=truea1.sinks.k1.hdfs.path=hdfs://192.168.11.177:9000/flume/events/%Y/%

转自：http://lxw1234.com/archives/2015/10/527.htmFlume中的HDFS Sink应该是非常常用的，其中的配置参数也比较多，在这里记录备忘一下。channeltypehdfspath写入hdfs的路径，需要包含文件系统标识，比如：hdfs://namenode/flume/webdata/可以使用

1.什么是channel？2.什么是source？3.什么是sink？4.直接读取文件Source,有哪两种方式？5.Channel有几种方式？6.Sink在设置存储数据时，数据较多，较少的情况下，该如何处理？看了一下Flume中央日志系统（版本号：1.3.X），Flume还是一个非常不错的日志收集系统的，其设计理念非常易用，简洁。并且是一个开源项目