查询HDFS总容量, 查询HDFS配额大小, HDFS使用量

最新推荐文章于 2024-08-15 22:44:45 发布

原创最新推荐文章于 2024-08-15 22:44:45 发布 · 1.8k 阅读

3 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #运维 #java #hadoop

本文档详细介绍了如何通过HDFS配置，包括加载核心配置文件和HDFS-site.xml，使用keytab进行用户登录，然后获取并分析根目录的配额信息，包括空间限额、已使用空间和HDFS总容量。

private void test() throws Exception{
    // 初始化hdfs
    Configuration conf = new Configuration();
    conf.addResource(new FileInputStream("/xxxxx/hive-conf/core-site.xml"));
    conf.addResource(new FileInputStream("/xxxxx/hive-conf/hdfs-site.xml"));
    UserGroupInformation.setConfiguration(conf);
    UserGroupInformation.loginUserFromKeytab("hdfs_admin", "/xxxx/hdfs_admin.keytab");
    FileSystem fs = FileSystem.get(conf);
    // 获取根路径下的配额
    QuotaUsage quota = fs.getQuotaUsage(new Path("/"));
    // 查询配额大小
    long spaceQuota = quota.getSpaceQuota();
    // 查询已使用大小
    long used = quota.getSpaceConsumed();
    // 查询HDFS磁盘总容量
    DistributedFileSystem dfs = (DistributedFileSystem )fs;
    long capacity = dfs.getStatus().getCapacity();
}