HDFS的Java API操作

一、目的

使用Javaapi操作hdfs分布式文件系统的目录和文件

二、步骤

1.首先需要将hadoop-3.3.4下载到本地的电脑上,并在bin中添加下面三个文件

 

2.配置Hadoop的环境变量

如果只是这样的话查看hadoop版本的话会出现错误,出现这个错误的原因是因为在配置jdk环境变量的时候,jdk的根目录有空格所以这里出现了错误

解决这个错误的话需要打开hadoop-env.cmd将里面的JAVA_HOME进行修改即可

这样在查看Hadoop就成功了

3.创建maven项目

4.添加maven库依赖

5.获取客户端对象,在项目中创建com.qcby的包,在该包下创建HDFS_CURD的文件

6.上传文件到HDFS,在本地创建baixiaomin.txt的文件然后上传到hdfs/bxm下面

7.从HDFS下载文件

 

8.目录操作:在hdfd_curd类中添加方法testMKdirDeleteAndRename(),对HDFS的目录进行操作,包括创建目录,重命名目录和删除目录

(1)创建目录

(2)重命名目录

(3)删除目录

9.查看目录中的文件信息

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值