大数据学习40：Flume metric 注解

最新推荐文章于 2022-01-07 11:41:18 发布

月魂_123123

最新推荐文章于 2022-01-07 11:41:18 发布

阅读量1.2k

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据文章标签：大数据

本文链接：https://blog.youkuaiyun.com/ggwxk1990/article/details/79463049

本文介绍了启动Flume监控的方法，特别是如何通过获取json格式的metric来监控Flume的运行状态。此外，还提到Flume可以将度量信息发送到Ganglia进行更深入的监控。默认情况下，Flume每分钟向Ganglia报告一次度量数据。了解更多详情可参考相关文档。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

启动flume监控的一种方式：

flume-ng agent \
--name a1 \
--conf $FLUME_HOME/conf \
--conf-file $FLUME_HOME/conf/exec-memory-hdfs-partition.conf \
-Dflume.root.logger=INFO,console \
-Dflume.monitoring.type=http \
-Dflume.monitoring.port=1234

打开网页，得到json格式的metric：

{
"SOURCE.src-1":{
"OpenConnectionCount":"0",  //目前与客户端或sink保持连接的总数量(目前只有avro source展现该度量)
"Type":"SOURCE",
"AppendBatchAcceptedCount":"1355",  //成功提交到channel的批次的总数量
"AppendBatchReceivedCount":"1355",  /