Flume配置文件案例(端口监听)

最新推荐文章于 2024-04-02 23:15:55 发布

原创最新推荐文章于 2024-04-02 23:15:55 发布 · 351 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#flume

大数据同时被 2 个专栏收录

15 篇文章

订阅专栏

Hadoop

9 篇文章

订阅专栏

本文介绍了一个具体的Flume配置案例，详细展示了如何配置agent、source、sink及channel等组件，并设置了相应的参数，如source类型设置为netcat，bind地址设为hadoop102，port设为99999等。

Flume配置文件案例

定义agent名字为a1

source名字叫r1，如果有多个，用空格间隔

sink名字叫k1，channel名字叫c1

a1.sources = r1
a1.sinks = k1
a1.channels = c1
#组名名.属性名=属性值
a1.sources.r1.type=netcat
a1.sources.r1.bind=hadoop102
a1.sources.r1.port=99999

#定义sink
a1.sinks.k1.type=logger

#定义chanel
a1.channels.c1.type=memory
a1.channels.c1.capacity=1000

#连接组件 同一个source可以对接多个channel，一个sink只能从一个channel拿数据！
a1.sources.r1.channels=c1
a1.sinks.k1.channel=c1