数据开发探索者

Flume练习题 题目1 需求：使用Flume监听一个端口，收集该端口数据，并打印到控制台。 #步骤一：agent Name a1.sources = r1 a1.sinks = k1 a1.channels = c1 #步骤二：source a1.sources.r1.type = netcat a1.sources.r1.bind = localhost a1.sources.r1.port = 44444 #步骤三： channel selector a1.sources.r1.selec

Flume 一、写flume的步骤 1.0.0 Flume 事务 1.0.1 Flume Agent内部原理 ​ 图1 1.1 画拓扑图 总结：一个channel只能输出一个结果文件。 一个flume agent 由 source + channel + sink 构成，类比于mapper + shuffer + reducer。 1.1.1 确定source类型 常用类型： 1) arvo: 用于Flume agent 之间的数据源传递