HDFS读数据的流程

本文详细描述了在Hadoop分布式文件系统中,客户端如何通过Namenode获取文件元数据,并从DataNode节点读取文件块的过程。客户端首先请求Namenode验证文件存在并获取其块信息,然后依次从指定的DataNode读取每个数据块完成文件读取操作。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

1、客户端:namenode,我要读取/test/a.txt,请确认!

2、namenode:好的,有这个文件可以读取,这个文件的元数据我发给你了,你自己去找吧(元数据:文件有两个块,blk-17728-1(dream1),blk-17728-2(dream1))(我去看看有没有数据)

3、客户端:我去找dream1读了,draem1我要读取 blk-17728-1

4、datanode(dream1):有这个文件,传输连接已经建立,开始传输

5、客户端:好的第一个块已经读完了,没你的事了,我再去找blk-17728-2 (重复3-4)

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值