- 博客(4)
- 收藏
- 关注
转载 zookeeper学习2
<br />Zookeeper/Hbase/Hadoop三者之间的关系,在此我把三者之间的关系画在一张图上希望能表达的清楚一些。<br /><br />Zookeeper用来同步Hbase服务状态、监控集群防止单点失效<br />HDFS是Hadoop中最核心的一部分,用来对Hbase的数据进行存储<br />1、Zookeeper客户端与服务端的大致结构<br /> 服务端<br /> Zookeeper还是属于一个C/S的架构的应用服务,Zookeeper的服务器端分为2种运行模式:单台和集群
2010-11-25 09:38:00
589
转载 zookeeper学习3
<br /> 记得在大约在2006年的时候Google出了Chubby来解决分布一致性的问题(distributed consensus problem),所有集群中的服务器通过Chubby最终选出一个Master Server ,最后这个Master Server来协调工作。简单来说其原理就是:在一个分布式系统中,有一组服务器在运行同样的程序,它们需要确定一个Value,以那个服务器提供的信息为主/为准,当这个服务器经过n/2+1的方式被选出来后,所有的机器上的Process都会被通知到这个服务器就是主服
2010-11-25 09:38:00
522
转载 zookeeper学习1
<br />ZooKeeper 是什么?<br /> ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员, Apache Hbase和 Apache Solr 以及LinkedIn sensei 等项目中都采用到了 Zookeeper。ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,ZooKeeper是以Fast Paxos算法为基础,实现同步服务,配置维护和命名服务等分布式应用。<br /> <br /
2010-11-25 09:36:00
499
转载 linux内存相关
<br />Linux的基本原则是没有资源应该被浪费。因此核心会使用尽可能多的RAM,来缓存来自本地和远程的文件系统的信息。系统做读写操作的时候,会将与当前运行的进程相关的数据尽量存储在RAM里。系统报告的缓存是缓冲和页缓存两者之和。缓存并不是在进程结束的时候被回收(你可能很快会启动另外一个进程,需要同样的数据),而是随需回收--比如,当你启动一个需要大量内存的进程时,Linux核心会从内存中回收缓存,将得到的内存分配给新的进程。<br /> <br />有些区域,比如匿名内存映射(mmps)和
2010-10-13 11:14:00
765
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人