小文件治理之hadoop集群监控：文件目录个数获取的三种方法

最新推荐文章于 2025-08-25 11:01:02 发布

原创

最新推荐文章于 2025-08-25 11:01:02 发布 · 1k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop #hdfs

前言

总结一下获取文件目录数的方法

一、50070页面

在这里插入图片描述

二、jmx获取

jmx的服务端是servlet，通过httpClient调用就行


[root@hadoop101 software]# curl hadoop101:50070/jmx?qry=Hadoop:service=NameNode,name=NameNodeInfo
{
  "beans" : [ {
    "name" : "Hadoop:service=NameNode,name=NameNodeInfo",
    "modelerType" : "org.apache.hadoop.hdfs.server.namenode.FSNamesystem",
    "Total" : 3170276474880,
    "UpgradeFinalized" : true,
    "ClusterId" : "CID-f451766f-cd7d-4ade-994c-cc5359e5a60e",
    "Version" : "2.7.2, rb165c4fe8a74265c792ce23f546c64604acf0e41",
    "Used" : 91505946150,
    "Free" : 2914452942848,
    "Safemode" : "",
    "NonDfsUsedSpace" : 164317585882,
    "PercentUsed" : 2.8863711,
    "BlockPoolUsedSpace" : 91505946150,
    "PercentBlockPoolUsed" : 2.8863711,
    "PercentRemaining" : 91.930565,