一、目的
使用Javaapi操作hdfs分布式文件系统的目录和文件
二、步骤
1.首先需要将hadoop-3.3.4下载到本地的电脑上,并在bin中添加下面三个文件
2.配置Hadoop的环境变量
如果只是这样的话查看hadoop版本的话会出现错误,出现这个错误的原因是因为在配置jdk环境变量的时候,jdk的根目录有空格所以这里出现了错误
解决这个错误的话需要打开hadoop-env.cmd将里面的JAVA_HOME进行修改即可
这样在查看Hadoop就成功了
3.创建maven项目
4.添加maven库依赖
5.获取客户端对象,在项目中创建com.qcby的包,在该包下创建HDFS_CURD的文件
6.上传文件到HDFS,在本地创建baixiaomin.txt的文件然后上传到hdfs/bxm下面
7.从HDFS下载文件
8.目录操作:在hdfd_curd类中添加方法testMKdirDeleteAndRename(),对HDFS的目录进行操作,包括创建目录,重命名目录和删除目录
(1)创建目录
(2)重命名目录
(3)删除目录
9.查看目录中的文件信息