python-使用jmxquery查询kafka的metrics

最新推荐文章于 2025-06-17 18:11:45 发布

大飞哥2

最新推荐文章于 2025-06-17 18:11:45 发布

阅读量2.1k

点赞数

分类专栏： python kafka

python 同时被 2 个专栏收录

15 篇文章

订阅专栏

kafka

10 篇文章

订阅专栏

本文介绍如何利用Python的jmxquery模块监控Kafka的性能指标。首先，需要通过pip安装jmxquery模块，然后在Kafka的启动配置中添加JMX环境变量，设置JMX端口为8888。重启Kafka后，使用jmxquery连接到JMX服务，运行查询获取Kafka的运行状态和性能数据。

jmxquery模块:通过JMX轻松运行查询并从Java虚拟机收集指标。

安装jmxquery:

pip3.6 install jmxquery

开启Kafka的JMX：
在kafka的启动文件./bin/kafka-server-start 增加JMX环境变量：

if [ "x$KAFKA_HEAP_OPTS" = "x" ]; then
    export KAFKA_HEAP_OPTS="-Xmx1G -Xms1G"
    export JMX_PORT="8888"
fi

重启kafka,让配置生效后，现在我们在python中查询kafka的指标：

from jmxquery import JMXConnection, JMXQuery

jmxConnection = JMXConnection("service:jmx:rmi:///jndi/rmi://127.0.0.1:8888/jmxrmi")
jmxQuery = [JMXQuery("*:*")]
metrics = jmxConnection.query(jmxQuery)
for metric in metrics:
    print(f"{metric.to_query_string()} ({metric.value_type}) = {metric.value}")

参考：https://github.com/dgildeh/JMXQuery