简述HDFS的系统架构,以及如何保证数据安全

本文介绍了HDFS的Master/Slave架构,包括NameNode和DataNode的角色。详细阐述了通过数据块及其副本策略来保障数据安全的方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

简述HDFS的系统架构:

HDFS的体系框架是Master/Slave结构,一个典型的HDFS通常由单个NameNode和多个DataNode组成,但是为备份元数据,一般还有一个secondary namenode。

如何保证数据安全:

(1)存储在hdfs系统上的文件,在文件路径上是一个文件,但其实文件内部会按blocksize被切分为128m的block存储在不同的结点上,同时block还存在副本文件,副本数默认为3个。

(2)副本存放策略一般是:如果请求方所在机器是一个datanode的话,那么第一个副本就直接存放在本地结点上,否则就在集群中随机选择一个datanode,第二个副本放置在第一个副本的同一个机架但不同结点上,第三个副本放在不同机架不同结点上。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值