通过IO流操作HDFS

最新推荐文章于 2021-05-31 00:40:55 发布

搁浅记忆

最新推荐文章于 2021-05-31 00:40:55 发布

阅读量1k

点赞数 1

分类专栏： Hadoop 文章标签： IO流操作HDFS

本文链接：https://blog.youkuaiyun.com/huangyuhuangyu/article/details/82688852

版权

package com.atguigu.hdfs;

import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.net.URI;
import java.net.URISyntaxException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FSDataInputStream;
import org.apache.hadoop.fs.FSDataOutputStream;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;
import org.junit.Test;
import org.mortbay.util.IO;

/**通过IO流操作HDFS
 * @author huangyu
 *
 */
public class IOToHdfs {
	@Test
	// 文件的上传 从本地通过IO流的方式上传到HDFS服务器
	public void putFileToHDFS() throws IOException, InterruptedException,
			URISyntaxException {
		Configuration conf = new Configuration();
		// 1,获取文件系统
		FileSystem fileSystem = FileSystem.get(
				new URI("hdfs://hadoop103:9000"), conf, "atguigu");
		// 2,获取输入流
		FileInputStream fsInputStream = new FileInputStream(new File(