本文解答了关于HDFS中文件的实际占用空间问题：当文件大小小于块大小时，HDFS仅占用实际文件大小的空间。此外，文章还解释了块大小存在的必要性，即通过并行处理不同块来加速MapReduce任务。
1、 一个HDFS上的文件大小(file size) 小于块大小(block size) ，那么HDFS会实际占用Linux file system的多大空间？
答案是实际的文件大小，而非一个块的大小。
2、如果hdfs占用Linux file system的磁盘空间按实际文件大小算，那么这个”块大小“有必要存在吗？
其实块大小还是必要的，mapreduce分布式处理的时候可以同时计算数据所在的各个block，这样可以提高速度。
HDFS 的 file size 和 block size
最新推荐文章于 2024-07-05 16:14:23 发布
扫一扫
866
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
