【HBase】图解 HDFS 工作原理

本文详细介绍了HDFS的工作原理,特别是写操作的基本过程。在一个HDFS集群中,仅有一个NameNode负责管理文件系统的命名空间及客户端请求,而DataNodes则负责存储实际的数据块。当进行写操作时,客户端会将数据分成多个副本(默认为三个),并分布存储在不同的DataNodes上。
微博上看到的一张关于HDFS的图片,形象生动的解释的HDFS的工作原理,再确切一点是 写操作的的基本过程:
1 一个集群中只有一个NameNode,可以有多个DataNodes
2  namenode 承担 数据的位置存储信息 ,并将存储位置信息告诉client端!
3 得到位置信息后,client端开始写数据
4 写数据的时候是 将数据分块并存储为多份(一般为3份),放在不同的datanode 节点!
5 client 先将数据写到第一个节点,在第一个节点接收数据的同时,又将它所接收的数据推送到第二个,第二个推送到第三个节点,如果有多个节点,依次类推。。
6 从图中可以知道 NameNode 不参与 数据块的IO的!相当于mongodb 集群中的 mongos 和config 服务器的双重角色!
22664653_201201102217281.jpg

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值