HDFS——DN整体架构与启动流程

前面文件介绍了dn的持久化文件与对应的数据结构,本文来介绍写dn的整体架构,以及dn的启动流程。

【整体架构】

如图所示,从功能逻辑上来划分,dn的架构可以分为三层。

最上层为服务层,这一层主要包括三个模块:

  • RpcServer

    对外提供RPC服务,即来自客户端,namenode(后面均简称为nn),其他所有dn的rpc请求处理入口。

  • DataXceiver

    数据传输服务,客户端对block的读写数据传输,以及dn与dn之间数据副本的拷贝都是通过该服务完成的。

  • DatanodeHttpServer

    对外提供http服务,主要用于展示dn内部的一些状态。

底层为数据存储层,dn中的所有服务都是在数据存储的基础上完成的,具体可以分为两个部分:

  • FsDataset:抽象了dn中数据块的所有操作,可以理解为负责dn中block的创建、读、写、删除等操作与管理,详细参考

评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值