hdfs管理员操作dfsadmin

最新推荐文章于 2024-08-06 23:56:20 发布

浪灬迹-红尘少年

最新推荐文章于 2024-08-06 23:56:20 发布

阅读量1.3k

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop 文章标签： hdfs管理员操作常用命令

本文链接：https://blog.youkuaiyun.com/qq_33706146/article/details/90518291

Hadoop 专栏收录该内容

16 篇文章

订阅专栏

本文详细介绍了HDFS管理员使用dfsadmin命令进行集群状态检查、元数据保存、获取fsimage、设置配额等操作，以及hdfs常用命令如追加文件、合并文件、设置复制因子和管理快照等。这些命令对于日常管理和维护HDFS集群至关重要。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hdfs管理员操作dfsadmin
-------------------------------
1.-report：返回集群的状态信息
$>hdfs dfsadmin -report
2.-metasave：默认存放到{HADOOP_LOG_DIR}路径下,包含datanode和块的信息
$>hdfs dfsadmin -metasave metasave.tt
$>cd {HADOOP_LOG_DIR}
$>gedit metasave.tt
3.-fetchImage：从namenode节点获取最新的fsimage文件至本地指定目录
$>hdfs dfsadmin -fetchImage ~/ (注：在datanode节点上执行)
4.-setQuota:设置文件目录配额
$>hdfs dfsadmin -setQuota 8 ~/hyxy
4.-setSpaceQuota:设置文件目录空间配额
$>hdfs dfsadmin -setSpaceQuota 8 ~/hyxy

hdfs commond命令
----------------------------
1.appendToFile追加文件至目标文件末尾；(开yarn进程)
$>hadoop fs -appendToFile text111.txt /spaceQuota/text.txt
2.getmerge:合并文件
$>hadoop fs -getmerge -nl /spaceQuota textmerge.txt
3.setrep: 设置文件或目录的复本因子
$>hadoop fs -setrep -w 1 /spaceQuota/text.txt
4.Snapshot快照
$>hdfs dfsadmin -allowSnapshot /spaceQuota //文件夹spaceQuota可以做快照
$>hdfs dfs -createSnapshot /spaceQuota snapshot1 //创建快照
$>hdfs dfs -deleteSnapshot /spaceQuota snapshot1 //删除快照
$>hdfs dfs -renameSnapshot /spaceQuota snapshot1 spaceQuota_snapshot
$>hdfs lsSnapshottableDir //列出快照的列表