第128讲:Hadoop集群管理工具dfsadmin实战详解学习笔记

本文介绍Hadoop中dfsadmin工具的使用方法,包括查看HDFS信息和执行管理操作,如刷新节点列表、进入安全模式等。适用于Hadoop管理员及运维人员。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

128讲:Hadoop集群管理工具dfsadmin实战详解学习笔记

通过dfsadmin可以查看hdfs的一些信息也可以执行一些管理操作。

要想使用dfsadmin需要有管理员权限,因为dfsadmin可以修改hdfs的内容。

使用hadoop dfsadmin命令可以显示帮助 。

hadoop dfsadmin -report 统计信息,可以查看 datanodeIP,心跳信息等。

 

hadoop dfsadmin

DEPRECATED: Use of this script to execute hdfs command is deprecated.

Instead usr the hdfs command for it.

Usage: hdfs dfsadmin

Note:Administrative commands can only be run as the HDFS superuser.

[-report [-live] [-dead] [-decommissioning]]

[-safemode <enter | leave | get | wait>]

[saveNodespace]

[roolEdits]

[restoreFailedStorage true | false|check]

[-refreshNodes]

[-setQuota <quota> <dirname>...<dirname>]

[-clrQuota <dirname>...<dirname>]

[finalizeUpgrade]

[rollingUpgrade [<query|prepare|finalize>]]

[-refreshServiceAcl]

[refreshUserToGroupMappings]

[-refreshSuperUserGroupsConfiguration]

[-refreshCallQueue]

[-refresh <host: ipc_port> <key> <arg1..argn>]

[-reconfig <dataname|...> <host: ipc_port> <start|status>]

[printTopology]

[-refreshNamenodes datanode_host: ipc_port]

[-deleteBlickpool datanode_host: ipc_port blockpoolId[force]]

[-setBalancerBandwidth <bandwidth in bytes per sencond>]

[-fetchImage <local directory>]

[-allowSnapshot <snapshotDir>]

[-disallowSnashot <snapshotDir>]

[shutdownDatanode <datanode_host: ipc_port> [upgrade]]

[getDatanodeInfo <datanode_host: ipc_port>]

[-metasave filename]

[-setStoragePolicy path policyName]

[-getStoragePolicy path]

[-help [cmd]]

 

hadoop dfsadmin -saveNamespace   将内存中的文件系统映像保存到一个新的fsimage,重置edits文件。

hadoop dfsadmin -refreshNodes  更新datanodes列表。有些节点不存在了就需要用refreshNodes来更新。

 

以上内容是王家林老师DT大数据梦工厂《Hadoop深入浅出实战经典》第128讲的学习笔记。
王家林:SparkFlinkDockerAndroid技术中国区布道师。Spark亚太研究院院长和首席专家,DT大数据梦工厂创始人,Android软硬整合源码级专家,英语发音魔术师,健身狂热爱好者。

微信公众账号:DT_Spark

联系邮箱18610086859@126.com 

电话:18610086859

QQ:1740415547

微信号:18610086859  

新浪微博:ilovepains

王家林的第一个中国梦:免费为全社会培养100万名优秀的大数据从业人员!

可以通过王家林老师的微信号18610086859发红包捐助,目前已经发布的王家林免费视频全集如下:

1,《大数据不眠夜:Spark内核天机解密(共100讲)》:http://pan.baidu.com/s/1eQsHZAq  

2,《Hadoop深入浅出实战经典》 http://pan.baidu.com/s/1mgpfRPu 

3,《Spark纯实战公益大讲坛》 http://pan.baidu.com/s/1jGpNGwu 
4,《Scala深入浅出实战经典》 http://pan.baidu.com/s/1sjDWG25 
5,《Docker公益大讲坛》 http://pan.baidu.com/s/1kTpL8UF 
6,《Spark亚太研究院Spark公益大讲堂》 http://pan.baidu.com/s/1i30Ewsd 

7Spark实战高手之路全部六阶段视频:http://edu.51cto.com/pack/view/id-144.html

8,《大数据Spark企业级实战》购买http://item.jd.com/11622851.html

 

128讲视频网站地址:

51CTO

http://edu.51cto.com/lesson/id-78169.html

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值