java API操作hdfs查看目录

最新推荐文章于 2025-05-25 19:40:20 发布

原创

最新推荐文章于 2025-05-25 19:40:20 发布 · 3.5k 阅读

·

0

·

CC 4.0 BY-SA版权

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文介绍了如何使用 Java API 进行 HDFS 文件系统的目录查看，包括分别获取文件和文件夹的方法。第一个示例专注于获取文件，而第二个示例则涵盖了文件和文件夹的全面检索。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

需要注意的：
第一个程序只会获取文件，不获取文件夹。
第二个会获取文件以及文件夹

package hadoop.hdfs;

import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.net.URI;
import java.net.URISyntaxException;

import org.apache.commons.io.IOUtils;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileStatus;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.LocatedFileStatus;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.fs.RemoteIterator;
import org.junit.jupiter.api.Test;

public class HDFSUtil {

	/*
	 * 列出文件
	 * */
	@Test
	public void listfile() throws IOException {
		Configuration conf = new Configuration();//加载配置文件，将配置文件放在src下
		FileSystem fs=FileSystem.get(conf);//获取文件系统实例
		RemoteIterator<LocatedFileStatus> listFiles = fs.listFiles(new Path("/"), true);
		//递归列出该目录下所有文件，不包括文件夹，后面的布尔值为是否递归
		whil

最低0.47元/天解锁文章

200万优质内容无限畅学

博客等级

码龄8年

222
原创

274
点赞

295
收藏

178
粉丝

关注

私信

热门文章

分类专栏

展开全部收起

上一篇：: java API操作hdfs删除文件或文件夹

下一篇：: Hadoop RPC的简单实现

最新评论

E-邝博士的问题-中南林业科技大学第十一届程序设计大赛
晴空～蓝兮: 真的假的，原来以前这个邝老师负责的啊，23集训队蒟蒻呆了快一年我见都没见过，也是无语，学校集训队也是垃圾了，几年没牌子了，23拉不到人打了已经
如何配置通过Steam启动SMAPI
m0_65050112: 请问我下载完Smapi后点击install on windows 然后输入1，为什么它显示我这是无效的选择啊老版的Smapi和mod我都删了
serde json 常用实践
JA+: 加类型后又变成这样 error[E0277]: the trait bound `Person: serde::de::Deserialize<'_>` is not satisfied --> src\lib.rs:127:34 | 127 | match serde_json::from_str::<Person>(data){ | ^^^^^^ the trait `serde::de::Deserialize<'_>` is not implemented for `Person` | = help: the following other types implement trait `serde::de::Deserialize<'de>`: &'a Path &'a [u8] &'a str () (T0, T1) (T0, T1, T2) (T0, T1, T2, T3) (T0, T1, T2, T3, T4) and 127 others note: required by a bound in `serde_json::from_str` --> C:\Users\xxxx\.cargo\registry\src\mirrors.ustc.edu.cn-61ef6e0cd06fb9b8\serde_json-1.0.94\src\de.rs:2603:8 | 2603 | T: de::Deserialize<'a>, | ^^^^^^^^^^^^^^^^^^^ required by this bound in `serde_json::from_str`
serde json 常用实践
JA+: 引用「let v: Value = serde_json::from_str(data)?;」你这个是官网例子吧，为什么我报这个啊 [code=plain]error[E0282]: type annotations needed --> src\lib.rs:127:11 | 127 | match serde_json::from_str(data){ | ^^^^^^^^^^^^^^^^^^^^ cannot infer type of the type parameter `T` declared on the function `from_str` 128 | Ok(json) => { 129 | println!("{:?}",json.name); | ---- type must be known at this point | help: consider specifying the generic argument | 127 | match serde_json::from_str::<T>(data){ | +++++ [/code]
U盘安装 Kali Linux 安装无法挂载问题已解决（kali+win7双系统）
亻三几又: 用rufus安装两次都是安装到媒体加载时读不了U盘，安装不下去，后来把ISO模式改为DD模式就好了

大家在看

最新文章

目录

展开全部

收起

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。