
distribution
文章平均质量分 56
弓永峰
关注java 分布式存储与计算
展开
-
hdfs 数据一致性
转载地址:http://www.wubiaoblog.com/archives/984HDFS以流式数据访问模式来存储文件,运行于大量硬件集群上。个人觉得,HDFS被设计成为支持AP,并具有最终一致性(简单一致性模型)。为什么呢?因为在集群系统中P是必须的,而HDFS对文件采用一次写入多次读入的逻辑设计,不支持文件并发写入、不支持文件修改。所以高可用性对HDFS来说至关重要的!转载 2014-01-18 07:56:20 · 7331 阅读 · 0 评论 -
分布式系统的数据一致性
转载地址:http://f.dataguru.cn/thread-126007-1-1.html在足球比赛里,一个球员在一场比赛中进三个球,称之为帽子戏法(Hat-trick)。在分布式数据系统中,也有一个帽子原理(CAP Theorem),不过此帽子非彼帽子。CAP原理中,有三个要素:一致性(Consistency)可用性(Availability)分区容忍性(Partiti转载 2014-01-18 07:33:24 · 1445 阅读 · 0 评论 -
hbase,hdfs 数据一致性
hbase 采用的是强一致性N: 1 (数据备份的数目)W: 1 (数据写入几个节点返回成功)R: 1 (读取数据时需要读取的备份节点个数)W + R > N但是hdfs采用的最终一致性N: 3 (数据备份的数目)W: 1 (数据写入几个节点返回成功),默认是1,但是可以配置: dfs.replication.minR: 1 (读取数据的时候原创 2014-01-18 14:19:28 · 4221 阅读 · 0 评论