
Zookeeper
寂寞烟
打杂的码农
展开
-
Apache ZooKeeper入门2
记得在大约在2006年的时候Google出了Chubby来解决分布一致性的问题(distributed consensus problem),所有集群中的服务器通过Chubby最终选出一个Master Server ,最后这个Master Server来协调工作。简单来说其原理就是:在一个分布式系统中,有一组服务器在运行同样的程序,它们需要确定一个Value,以那个服务器提供的信息为主/为准,当这转载 2014-04-17 10:53:33 · 588 阅读 · 0 评论 -
【Apache ZooKeeper】官方文档
ZooKeeper是一个高性能的用于协调分布式应用程序的服务。它将公共服务,比如命名、配置管理、同步化和集群服务封装进一个简单的接口,可以直接用于实现共识(consensus)、集群管理、领导者选举和存在(presence )协议。可以在其上构建自己的分布式应用程序。ZooKeeper使用一种类似文件系统目录树的数据模型,它可以运行于Java上并且具有Java和C的封装。转载 2014-04-29 15:43:35 · 806 阅读 · 0 评论 -
巧用zookeeper实现分布式并行计算
云计算的技术话题中少不了“分布式”,“并行计算” 这些个关键词,我们知道硬件扩展的条件(Scale-up)始终是有限制的,将计算分散到网络中更多机器的CPU上提供更高的计算性能(Scale-out),并在这基础上能将计算同时进行,那么总体计算瓶颈会减小,计算的性能会显著提高,也就是说将串行计算变为并行计算,将大量的计算在同一时间发生,,将任务分配到每一个处理器上。这里面需要一个重要的角色,分布式转载 2014-04-17 11:06:47 · 883 阅读 · 0 评论 -
Apache ZooKeeper入门3
开场白: 在上一篇关于介绍Zookeeper的文章中有同学给我留言,说到Zookeeper/Hbase/Hadoop三者之间的关系,在此我把三者之间的关系画在一张图上希望能表达的清楚一些。Zookeeper用来同步Hbase服务状态、监控集群防止单点失效HDFS是Hadoop中最核心的一部分,用来对Hbase的数据进行存储1、Zookeeper客户端与服务端的大致转载 2014-04-17 10:55:05 · 620 阅读 · 0 评论 -
Apache Zookeeper入门1
口水:Zookeeper是我目前接触过Apache开源系统中比较复杂的一个产品,要搞清楚这个东东里面的运作关系还真不是一时半会可以搞定的事,本人目前只略知皮毛之术。ZooKeeper 是什么? ZooKeeper 顾名思义 动物园管理员,他是拿来管大象(Hadoop) 、 蜜蜂(Hive) 、 小猪(Pig) 的管理员, Apache Hbase和 Apache Sol转载 2014-04-17 10:51:02 · 772 阅读 · 0 评论 -
ZooKeeper安装过程 .
一、安装需求安装java 1.6及hadoop 0.20.x二、安装zookeeper1、下载zookeeperwget http://mirror.bit.edu.cn/apache//zookeeper/zookeeper-3.4.3/zookeeper-3.4.3.tar.gz(本次安装3.4.3版本)其他版本下载地址(最好使用stable版本):http://z原创 2014-04-25 17:18:20 · 651 阅读 · 0 评论 -
ZooKeeper集群安装配置
ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(Distributed Synchronization)、命名服务(Naming Service)、集群维护(Group Maintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在转载 2014-04-25 17:21:36 · 833 阅读 · 0 评论