Linux中HDFS简单的shell操作

本文介绍了如何在Linux中进行HDFS的基本操作,包括启动Hadoop、创建与删除文件夹、上传与下载文件、复制文件以及查看文件大小。通过`start-dfs.sh`启动Hadoop,使用`hdfs dfs -mkdir`创建文件夹,`hdfs dfs -rm -r`删除文件夹,`hdfs dfs -put`上传文件,`hdfs dfs -get`下载文件,`hdfs dfs -cp`复制文件,以及`hdfs dfs -du -h`和`hdfs dfs -df -h`检查文件大小。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

实现Linux中实现HDFS中的基本操作

 

首先我们需要输入命令启动Hadoop

start-dfs.sh

 

1. 创建文件夹或目录

我们创建一个aa文件夹,并查看所有文件

创建:hdfs dfs -mkdir /aa

删除:hdfs dfs -rm -r /aa   备注:还有一种方法是 hdfs dfs -rmr /aa  这种方法也能删除但是会出来一个提示不推荐使用,

建议使用 -rm -r

 

查看:hdfs dfs -ls /

 

这时候我们去http://master:50070/ 中去看一下我们创建的文件夹

2. 上传文件

例如我们在我们linux中的一个jdk安装包上传到HDFS总的根目录  命令如下:

通过 -put我们来上传文件

hdfs dfs -put jdk-8u171-linux-x64.rpm hdfs://master:9000/

命令查看是否上传成功:hdfs dfs -ls /

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值