hdfs shell的基本操作和hdfsWeb查看文件

最新推荐文章于 2024-10-17 20:46:06 发布

wendaocp

最新推荐文章于 2024-10-17 20:46:06 发布

阅读量858

点赞数

CC 4.0 BY-SA版权

分类专栏： AI / BigData / Cloud 文章标签： hdfs

本文链接：https://blog.youkuaiyun.com/wendaocp/article/details/105583032

7 篇文章

订阅专栏

本文详细介绍了HDFS的基本操作命令，包括查询、创建文件夹、上传文件、查看内容、复制下载、删除重命名文件，以及权限设置和副本数调整等实用技巧。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

$ hadoop dfs -ls /    查询 / 目录下的所有文件和文件夹
$ hadoop dfs -ls -R    以递归的方式

hdfs dfs -mkdir /test    创建test文件夹

$ hadoop dfs -touchz /a.txt    在/目录下创建一个空文件a.txt

-copyFromLocal 把本地文件复制到hdfs，等同于
-put

hdfs dfs -put a.txt /test    把本地当前目录下的a.txt文件复制到  hdfs的 /test目录下

hdfs dfs -cat /test/a.txt

将hdfs中文件，复制拿到本地。

hdfs dfs -copyToLocal /test/a.txt  .     把/test/a.txt复制到当前目录
hdfs dfs -get /test/a.txt  .

. 指当前目录

hdfs dfs -rm -r /test/a.txt

hdfs dfs -mv /a.txt  /b.txt

hdfs dfs -getmerge /   local-file     把 / 目录下的所有文件合并到本地文件 local-file

修改权限

$ hadoop fs -setrep 1 /user/xxx/tmp  
会把tmp目录下的所有文件和子目录的副本都设置为1

$ hdfs balancer  -threshold  10  -include  master,slave1
10%的差距在各个节点之间