hdfs文件的读取1 (在eclipse中console输出)

王文友

于 2019-08-13 18:21:17 发布

阅读量507

点赞数

分类专栏： hdfs 文章标签： hdfs

本文链接：https://blog.youkuaiyun.com/big_data_study/article/details/99459217

版权

hdfs 专栏收录该内容

11 篇文章

订阅专栏

本文详细介绍了一种在Eclipse环境中使用Java进行HDFS文件读取的方法，通过具体代码示例展示了如何配置Hadoop环境参数并利用FileSystem API读取HDFS上的文件内容，并将其输出到控制台。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hdfs文件的读取 (在eclipse中console输出)

package com.qf.a.b;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class hdfs {
public static void main(String[] args) throws IOException {
readFileToConsole("/input/a.txt");
}

public static void readFileToConsole(String pat) throws IOException {
	Configuration conf = new Configuration();
	conf.set("fs.defaultFS","hdfs://192.168.8.10:9000");
	FileSystem fs = FileSystem.get(conf);
	//String path = null;
	//FSDataInputStream fis = fs.open(new Path(path));
	FSDataInputStream fis = fs.open(new Path("/input/a.txt"));
	IOUtils.copyBytes(fis, System.out, 4096, true);
	
	
}

}