运行Hadoop权威指南中的例子：3.5.2：FileSystemCat

原创于 2011-04-10 16:35:00 发布 · 457 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#Hadoop #Apache #Java #.net

Hadoop 专栏收录该内容

27 篇文章

订阅专栏

本文介绍了一个简单的Hadoop应用程序示例，该程序用于从HDFS中读取文件并显示其内容。通过这个示例，读者可以了解如何使用Java API进行HDFS文件操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1、编写代码：

package crt.hadoop.test;

import java.io.InputStream;
import java.net.URI;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;

public class FileSystemCat {
	public static void main(String[] args) throws Exception{
		String uri = args[0];
		Configuration conf = new Configuration();
		FileSystem fs = FileSystem.get(URI.create(uri), conf);
		InputStream in = null;
		try{
			in = fs.open(new Path(uri));
			IOUtils.copyBytes(in, System.out, 4096, false);
		} finally{
			IOUtils.closeStream(in);
		}
	}
}

2、把FileSystemCat.java复制到$HADOOP_HOME/build/classes/crt/hadoop/test

3、编译：

$ javac -classpath $HADOOP_HOME/hadoop-common-0.21.0.jar

$HADOOP_HOME/build/classes/crt/hadoop/test/FileSystemCat.java

4、运行：

$ export HADOOP_CLASSPATH=build/classes

$ hadoop crt.hadoop.test.FileSystemCat hdfs://hadoop-namenode:9001/tmp/readdatatest.txt

运行结果：

hello hadoop