Java大数据-Hadoop-HDFS的参数优先级顺序

最新推荐文章于 2024-05-28 10:55:52 发布

godkzz

最新推荐文章于 2024-05-28 10:55:52 发布

阅读量360

点赞数

分类专栏：大数据文章标签： hadoop hdfs java

本文链接：https://blog.youkuaiyun.com/godkzz/article/details/122040982

版权

大数据专栏收录该内容

29 篇文章

订阅专栏

编写测试客户端代码

@Test
public void testCopyFromLocalFile() throws IOException, 
InterruptedException, URISyntaxException {
 // 1 获取文件系统
 Configuration configuration = new Configuration();
 configuration.set("dfs.replication", "2");
 FileSystem fs = FileSystem.get(new URI("hdfs://hadoop102:8020"),configuration,"atguigu");
 // 2 上传文件
 fs.copyFromLocalFile(new Path("d:/sunwukong.txt"), new Path("/xiyou/huaguoshan"));
 // 3 关闭资源
 fs.close();
｝

项目 resources 资源目录下的hdfs-site.xml

<?xml version="1.0" encoding="UTF-8"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>

测试结果：

参数优先级排序

（1）客户端代码中设置的值 >（2）ClassPath 下的用户自定义配置文件 >（3）然后是服务器的自定义配置（xxx-site.xml）>（4）服务器的默认配置（xxx-default.xml）