对于上传文件到hdfs上时,当时hadoop的副本系数是几,这个文件的块数副本数就会有几份,无论以后你怎么更改系统副本系统,这个文件的副本数都不会改变,也就说上传到分布式系统上的文件副本数由当时的系统副本数决定,不会受replication的更改而变化,除非用命令来更改文件的副本数。因为dfs.replication实质上是client参数,在create文件时可以指定具体replication,属性dfs.replication是不指定具体replication时的采用默认备份数。文件上传后,备份数已定,修改dfs.replication是不会影响以前的文件的,也不会影响后面指定备份数的文件。只影响后面采用默认备份数的文件。但可以利用hadoop提供的命令后期改某文件的备份数:hadoop fs -setrep -R 1。
HDFS的dfs.replication不同验证
最新推荐文章于 2024-01-23 18:10:04 发布
本文详细解析了HDFS中文件上传时的副本系数设定及其后续影响。解释了文件的副本数量如何在创建时确定,并说明了之后更改系统副本设置不会影响已上传文件的副本数,除非手动更改。
2333

被折叠的 条评论
为什么被折叠?



