
zookeeper
马万明
一生的努力奋斗
一生的幸福充实
展开
-
Zookeeper fast leader选举算法
如何在zookeeper集群中选举出一个leader,zookeeper使用了三种算法,具体使用哪种算法,在配置文件中是可以配置的,对应的配置项是”electionAlg”,其中1对应的是LeaderElection算法,2对应的是AuthFastLeaderElection算法,3对应的是FastLeaderElection算法.默认使用FastLeaderElection算法.其他两种算法我没转载 2015-04-10 13:40:26 · 1366 阅读 · 0 评论 -
Zookeeper简介
场景一有这样一个场景:系统中有大约100w的用户,每个用户平 均有3个邮箱账号,每隔5分钟,每个邮箱账需要收取100封邮件,最多3亿份邮件需要下载到服务器中(不含附件和正文)。用20台机器划分计算的压力,从 多个不同的网路出口进行访问外网,计算的压力得到缓解,那么每台机器的计算压力也不会很大了。 通过我们的讨论和以往的经验判断在这场景中可以实现并行计算,但我们还期望能转载 2015-04-09 17:31:08 · 354 阅读 · 0 评论 -
zookeeper实现原理学习笔记一
zookeeper的数据模型:其实就是一个树结构,每个节点称作一个ZNode,每个ZNode可以通过其路径唯一标示。在每个ZNode上可存储少量数据(默认是1M,可以通过配置修改,通常不建议ZNode上存储大量数据),这个特性特别重要。ZNode根据其本身的特性,可分为下面两类:Regular ZNode:常规性Znode,用户需要显示的创建,删除Ephemeral ZNode翻译 2015-04-09 10:42:24 · 735 阅读 · 0 评论 -
Zookeeper ZAB协议
Zookeeper使用了一种称为Zab(Zookeeper Atomic Broadcast)的协议作为其一致性复制的核心,据其作者说这是一种新发算法,其特点是充分考虑了Yahoo的具体情况:高吞吐量、低延迟、健壮、简单,但不过分要求其扩展性。下面将展示一些该协议的核心内容:另,本文仅讨论Zookeeper使用的一致性协议而非讨论其源码实现Zookeeper的实现是有Client、Serv转载 2015-04-09 16:15:34 · 648 阅读 · 0 评论 -
Zookeeper的领导者选举和原子广播
zookeeper3.3.3源码分析(一)工作原理概述阅读时参考的版本是3.3.3.简单的说一下zookeeper工作的过程,如果对这个过程还不太清楚,或者说对它如何使用等不太清楚的,可以参考一下其他的文章,比如这篇,这一系列的文章将不讲解它如何使用(实际上我也没有在具体项目中使用过,只是简单的配置运行起来大概晓得如何工作而已).zookeeper有两种工作的模式,一种是单机方式,转载 2015-06-09 17:21:19 · 557 阅读 · 0 评论 -
Zookeeper原理详解
ZooKeeper是一个分布式的,开放源码的分布式应用程序协调服务,它包含一个简单的原语集,分布式应用程序可以基于它实现同步服务,配置维护和命名服务等。Zookeeper是hadoop的一个子项目,其发展历程无需赘述。在分布式应用中,由于工程师不能很好地使用锁机制,以及基于消息的协调机制不适合在某些应用中使用,因此需要有一种可靠的、可扩展的、分布式的、可配置的协调机制来统一系统的状态。Zookee转载 2015-06-10 08:48:48 · 12339 阅读 · 2 评论 -
zookeeper常见问题/疑惑
本文转载自技术大牛博客客户端1. 客户端对ServerList的轮询机制是什么随机,客户端在初始化( new ZooKeeper(String connectString, int sessionTimeout, Watcher watcher) )的过程中,将所有Server保存在一个List中,然后随机打散,形成一个环。之后从0号位开始一个一个使用。两个转载 2016-07-07 08:55:06 · 3424 阅读 · 0 评论 -
ZooKeeper客户端地址列表的随机原理
本文出自 “ni掌柜的IT专栏” 博客,请务必保留此出处http://nileader.blog.51cto.com/1381108/932948在之前一个文章《ZooKeeper Java API 使用样例》中提到,客户端使用ZooKeeper的时候,首先会建立与ZooKeeper的连接,方法是通过调用下面这个构造方法来实现的。public ZooKeeper(String转载 2016-07-07 09:53:24 · 1190 阅读 · 0 评论