DFSShell
HDFS以文件和目录的形式组织用户数据。它提供了一个命令行的接口(DFSShell)让用户与HDFS中的数据进行交互。命令的语法和用户熟悉的其他shell(例如 bash, csh)工具类似。下面是一些动作/命令的示例:
| 动作 | 命令 |
|---|---|
| 创建一个名为 /foodir 的目录 | bin/hadoop dfs -mkdir /foodir |
| 查看文件结构目录 |
hdfs dfs -ls -R / hadoop fs -ls /mydir |
| 删除文件 | hadoop fs -rm -r -skipTrash /test_dir/f1.txt |
| 删除文件夹 | hadoop fs -rm -r -skipTrash /test_dir |
| 上传整个目录文件夹 | hadoop dfs -put /hadoop/myfile / |
| 重命名文件夹 | hdfs dfs -mv /myfile /mydir |
| 上传单个文件 | hadoop fs -put /hadoop/myfile/f1.txt /test_dir |
| 把HDFS中整个文件夹目录下的文件合并并下载到本地 | hdfs dfs -getmerge /mydir /hadoop/temp |
| 从HDFS中把文件下载到本地 | hadoop dfs -get /mydir/f1.txt /hadoop/f1.txt |
| 查看名为 /foodir/myfile.txt 的文件内容 |
bin/hadoop dfs -cat /foodir/myfile.txt |
DFSShell 可以用在那些通过脚本语言和文件系统进行交互的应用程序上。
DFSAdmin
DFSAdmin 命令用来管理HDFS集群。这些命令只有HDSF的管理员才能使用。下面是一些动作/命令的示例:
| 动作 | 命令 |
|---|---|
| 将集群置于安全模式 |
bin/hadoop dfsadmin -safemode enter bin/hdfs dfasmin -safemode |
| 显示Datanode列表 | bin/hadoop dfsadmin -report |
| 使Datanode节点 datanodename退役 | bin/hadoop dfsadmin -decommission datanodename |
HDFS操作与管理:DFSShell与DFSAdmin命令详解
本文介绍了Hadoop HDFS中用于用户交互的DFSShell和集群管理的DFSAdmin命令。DFSShell提供了一系列类似于传统shell的命令,如创建目录、查看文件结构、上传下载文件等。DFSAdmin则包含了一些管理员级别的操作,如进入安全模式、显示Datanode列表和退役Datanode。这些工具对于HDFS的日常管理和维护至关重要。
1332

被折叠的 条评论
为什么被折叠?



