
flume
文章平均质量分 80
巛小文子......
在这个快餐的时代,必须努力奔跑
展开
-
Flume多数据源汇总案例
1:flume多数据源汇总 1) 案例需求: hadoop1上的 Flume-1 监控文件/home/hadoop/data/1.txt hadoop2 上的 Flume-2 监控文件/home/hadoop/data/2.txt Flume-1 与 Flume-2 将数据发送给 hadoop3上的 Flume-3,Flume-3 将最终数据打印到 控制台。 2)配置文件hadoop3 # Name the components ..原创 2021-05-07 16:13:38 · 172 阅读 · 0 评论 -
flume的断点续传功能
1:flume的断点续传功能介绍通过flume监控一个文件的时候,当flume断开连接的时候,如果这个文件有数据的变化,flume仍然可以监视这个文件的变化。官方文档:http://flume.apache.org/releases/content/1.9.0/FlumeUserGuide.html官网案例:1:必须指定sources的类型是TAIRDIR2:positionFile指定这个文件具体的位置信息2:代码测试配置文件#name the compon.原创 2021-05-07 10:11:35 · 1259 阅读 · 2 评论