hdfs文件的读取 (在eclipse中console输出)
package com.qf.a.b;
import java.io.IOException;
import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
public class hdfs {
public static void main(String[] args) throws IOException {
readFileToConsole("/input/a.txt");
}
public static void readFileToConsole(String pat) throws IOException {
Configuration conf = new Configuration();
conf.set("fs.defaultFS","hdfs://192.168.8.10:9000");
FileSystem fs = FileSystem.get(conf);
//String path = null;
//FSDataInputStream fis = fs.open(new Path(path));
FSDataInputStream fis = fs.open(new Path("/input/a.txt"));
IOUtils.copyBytes(fis, System.out, 4096, true);
}
}
本文详细介绍了一种在Eclipse环境中使用Java进行HDFS文件读取的方法,通过具体代码示例展示了如何配置Hadoop环境参数并利用FileSystem API读取HDFS上的文件内容,并将其输出到控制台。

1033

被折叠的 条评论
为什么被折叠?



