hdfs的shell基本操作

本文详细介绍了HDFS的shell操作,包括创建目录、查看目录、上传和下载文件、删除文件和目录、移动文件和目录、查看文件内容、检查文件信息、创建时间戳文件、复制文件或目录、查看文件大小等基本操作。此外,还讨论了HDFS安全模式的进入和退出,以及如何编写Shell脚本定时采集数据到HDFS。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、创建目录

(1)创建单层目录

        执行命令:hadoop fs -mkdir /ied

利用WebUI查看创建的目录

2)创建多层目录
执行命令:hdfs dfs -mkdir -p /luzhou/lzy

利用WebUI查看创建的多层目录

2、查看目录

        执行命令:hdfs dfs -ls /,查看根目录

 

执行命令:hdfs dfs -ls /luzhou

执行命令:hdfs dfs -ls -R /tmp,递归查看/tmp目录 

3、上传本地文件到HDFS

  • 创建test.txt文件,执行命令:echo "hello hadoop world" > test.txt

 上传test.txt文件到HDFS的/ied目录,执行命令:hdfs dfs -put test.txt /ied

查看是否上传成功

利用Hadoop WebUI界面查看
 

 

4、查看文件内容

               执行命令:hdfs dfs -cat /ied/test.txt

5、下载HDFS文件到本地

        先删除本地的test.txt文件

下载HDFS文件系统的test.txt到本地当前目录,执行命令:hdfs dfs -get /ied/test.txt

 

检查是否下载成功 

 

6、删除HDFS文件

        执行命令:hadoop fs -rm /ied/test.txt

 

7、删除HDFS目录

        执行命令:hdfs dfs -rmdir /luzhou

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值