小文件治理之hadoop集群监控： hdfs jvm数据获取

原创

已于 2022-03-09 10:10:16 修改 · 1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #hdfs #大数据

于 2022-03-08 19:46:13 首次发布

本文介绍了如何通过JMX接口获取Hadoop NameNode的内存使用、总体信息以及特定指标，包括Heap和NonHeap内存使用、GC状态等，并提供了相应的curl命令示例，便于监控和管理Hadoop集群。

文章目录

前言
一、获取jvm使用情况信息
二、获取的所有信息
三、获取指定信息方法
四、更多namenode的参数信息
总结

前言

怎样爬取50070页面的信息，一开始想写个爬虫，后来发现，可以通过接口调用，节省了很多麻烦

一、获取jvm使用情况信息

}[root@hadoop101 ~]# curl hadoop101:50070/jmx?qry=java.lang:type=Memory
{
   
   
  "beans" : [ {
   
   
    "name" : "java.lang:type=Memory",
    "modelerType" : "sun.management.MemoryImpl",
    "ObjectPendingFinalizationCount" : 0,
    "HeapMemoryUsage" : {
   
   
      "committed" : 149946368,
      "init" : 130023424,
      "max" : 932184064,
      "used" : 111460200
    },