任务21：21_Flume高级_Channel选择器副本机制（需求分析）

这里暂时还演示不了多路复用，因为多路复用需要结合拦截器一起。
所以多路服用的案例放到了自定义拦截器那里

监控文件的变动使用exec source和taildir均可。
但是优先使用taildir,毕竟挂了还可以再用。
监控文件的变动，将内容传给flume-2
flume1给flume2使用阿波罗sink和source

看avro sink /source 和 roll sink
最终的目的把hive实时更新的日志数据上传到hdfs，同时在本地还做一个备份。


采集hive数据的flume1使用两个channel，两个sink

为啥这里不使用一个channel对应两个sink呢
这里不能使用一个channel对应两个sink的。
如果用一个channel那么中间用的就是一个sink组，sink组里面没有什么副本机制的，只有默认，故障转移和负载均衡三种。故障转移：数据只会往一个sink里面发
负载均衡：数据是一人一条发，就不是完整的数据了。
这里我们需要达到的目的是：最终hdfs和本地磁盘都有hive日志。
只能多个channel。一定要。




中间使用 复制选择器。hdfs的数据和本地文件的数据必须保持一致。