本文介绍了如何在HDFS中识别和恢复丢失的块。首先，通过特定命令检查文件系统的状态，重点关注丢失或损坏的块，忽略复制不足的情况。然后，定位受影响的文件和块的位置，特别是对于大文件可能存在多个块的情况。最后，当无法恢复更多块时，使用HDFS命令恢复文件系统至正常状态，以便于监控新的错误。
可以使用
hdfs fsck /
确定哪些文件有问题。查看输出中是否有丢失或损坏的块（暂时忽略复制不足的块）。该命令特别冗长，尤其是在大型HDFS文件系统上，因此我通常会深入了解
hdfs fsck / | egrep -v '^\.+$' | grep -v eplica
它忽略了只有点和线谈论复制的线。
hdfs fsck /path/to/corrupt/file -locations -blocks -files
/path/to/corrupt/file是指
最低0.47元/天 解锁文章
扫一扫
1596
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
