10操作flume测试监控

hao难懂

于 2019-08-29 14:30:09 发布

阅读量222

点赞数

CC 4.0 BY-SA版权

分类专栏： flume basic 文章标签： flume 监控 ganglia

本文链接：https://blog.youkuaiyun.com/ExclusiveName/article/details/100137318

flume basic 专栏收录该内容

13 篇文章

订阅专栏

本文介绍如何配置Flume以使用Ganglia进行监控，包括修改flume-env.sh配置文件，启动Flume任务，以及通过Ganglia图表观察Flume运行状态，如事件写入、读取数量及通道状态等。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.修改/root/app/flume/conf目录下的flume-env.sh配置：

JAVA_OPTS="-Dflume.monitoring.type=ganglia
-Dflume.monitoring.hosts=192.168.1.102:8649
-Xms100m
-Xmx200m"

2.启动Flume任务

bin/flume-ng agent \
--conf conf/ \
--name a1 \
--conf-file job/flume-telnet-logger.conf \
-Dflume.root.logger==INFO,console \
-Dflume.monitoring.type=ganglia \
-Dflume.monitoring.hosts=192.168.1.102:8649

3.发送数据观察ganglia监测图

telnet localhost 44444

字段（图表名称）		字段含义
EventPutAttemptCount	source尝试写入channel的事件总数量
EventPutSuccessCount	成功写入channel且提交的事件总数量
EventTakeAttemptCount	sink尝试从channel拉取事件的总数量。这不意味着每次事件都被返回，因为sink拉取的时候channel可能没有任何数据。
EventTakeSuccessCount	sink成功读取的事件的总数量
StartTime				channel启动的时间（毫秒）
StopTime				channel停止的时间（毫秒）
ChannelSize				目前channel中事件的总数量
ChannelFillPercentage	channel占用百分比
ChannelCapacity			channel的容量