HDFS在上传文件的时候，如果其中一个DataNode突然挂掉了怎么办？

星空下的那个人影

已于 2022-05-01 10:21:42 修改

阅读量3k

点赞数 1

CC 4.0 BY-SA版权

分类专栏： hadoop 大数据面试文章标签： hadoop

于 2022-04-29 10:16:41 首次发布

本文链接：https://blog.youkuaiyun.com/sb_jb/article/details/124482139

大数据面试同时被 2 个专栏收录

87 篇文章

订阅专栏

hadoop

15 篇文章

订阅专栏

本文解释了客户端如何通过pipeline与DataNode交互，在数据上传中遇到DataNode宕机时，NameNode如何介入并触发副本复制，确保数据一致性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

                    
                    客户端上传文件时与DataNode建立pipeline管道，管道正向是客户端向DataNode发送的数据包，管道反向是DataNode向客户端发送ack确认，也就是正确接收到数据包之后发送一个已确认接收到的应答；
当DataNode突然挂掉了，客户端接收不到这个DataNode发送的ack确认，客户端会通知NameNode，NameNode检查该块的副本与规定的不符，NameNode会通知DataNode去复制副本，并将挂掉的DataNode作下线处理，不再让它参与文件上传与下载。