crush:一种可控,可扩展、去中心的数据副本分布方法(一)

摘要:
目前大规模分布式存储系统面临着成百上千机器带来的PB级数据量。
这样系统要能够均匀分布数据和工作负载,从而有效的利用资源发挥系统的最大性能,同时能够处理系统不断增长以及管理硬件故障。我们开发的Crush,是一种为对象分布式存储系统设计的大规模伪随机数据分布函数,它能有效将数据对象映射到存储对象而不需要依赖中心目录。因为大型系统一般都是动态,crush能够保证添加删除存储设备而保证最小数据移动。该算法可以适应各种各样的数据复制和可靠性机制和分发数据的用户定义的策略,实施跨失败域分离副本。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值