【HDFS】处理状态为RECEIVING_BLOCK的增量块汇报

大数据技术部落

已于 2024-06-01 19:28:33 修改

阅读量213

点赞数

分类专栏： HDFS全方位实战文章标签： hdfs hadoop 大数据

于 2024-06-01 19:28:21 首次发布

本文链接：https://blog.youkuaiyun.com/yexiguafu/article/details/135905694

版权

HDFS全方位实战专栏收录该内容

191 篇文章 ¥29.90 ¥99.00

订阅专栏

本文探讨了HDFS中处理状态为RECEIVING_BLOCK的增量块汇报。在BlockManager的incrementalBlockReport流程中，针对RECEIVING_BLOCK状态的块，NN不会更新block的numBytes，而是将其副本添加到BlockUnderConstructionFeature的replicas数组。DN侧生成的ReceivedDeletedBlockInfo包含block、块状态和删除提示。重点关注创建RBW时的PIPELINE_SETUP_CREATE场景。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

带着以下问题：

RECEIVING_BLOCK状态的IBR，block的长度汇报上来有用么？

BlockManager#processIncrementalBlockReport里，处理IBR，里面有一个case分支，专门处理RECEIVING_BLOCK状态的块。

      case RECEIVING_BLOCK:
      	// receving计数器++
        receiving++;
        // 第三个参数副本状态是RBW
        processAndHandleReportedBlock(storageInfo, rdbi