ZooKeeper

hbase 访问zookeeper的问题 坑 1、 Configuration config = HBaseConfiguration.create(); 书上说是会自动加载hbase-site.xml里面配置的zookeeper 配置 但是实际上是访问的是localhost本地的zookeeper2181端口 2、因此如果本地不是zookeeper server 的话就无法访问hbase 了 3、解决办法通过参数传给程序 例子: 阅读详情

ZooKeeper 简介

ZooKeeper 是一个开源的分布式协调服务,由 Apache 基金会维护。它通过树形数据结构(ZNode 树) 存储数据,提供高可用、强一致性的分布式协调能力,是分布式系统的核心基础设施之一。

在分布式系统中的核心用途

1. 配置管理
  • 作用:集中存储动态配置(如数据库地址、服务参数),支持实时更新与通知。
  • 机制:客户端监听 ZNode 节点,配置变更时触发回调。
  • 示例:
    // 监听配置节点 /config/db_url
    zk.exists("/config/db_url", watcher); // 节点变化时触发 watcher
    
2. 分布式锁
  • 原理:利用临时有序节点实现互斥锁(如 InterProcessMutex)。
  • 流程:
    1. 客户端创建临时节点 /lock/resource_000001。
    2. 判断是否为最小序号节点,是则获得锁;否则监听前序节点。
  • 优点:避免死锁(会话失效自动删节点),支持可重入锁。
  • 局限:频繁创建/删除节点时性能低于 Redis(适用于中低并发场景)。
3. 服务发现
  • 实现:服务启动时注册临时节点(如 /services/serviceA/192.168.1.1:8080)。
  • 客户端:监听节点变化,动态获取可用服务列表。
4. 集群管理
  • 节点监控:实时跟踪服务器状态(在线/离线)。
  • 选主(Leader Election):
    1. 所有节点创建临时有序节点 /election/node_000001。
    2. 最小序号节点成为 Leader,其他节点监听前序节点。
5. 分布式协调
  • 屏障(Barrier):等待多个节点完成任务后再继续。
  • 队列同步:通过 ZNode 顺序控制任务执行流。
关键特性总结
特性说明
强一致性所有客户端看到相同的数据视图(基于 ZAB 协议)。
高可用集群多节点部署(通常 2n+12n+12n+1 个节点容忍 nnn 个故障)。
顺序性所有写操作按全局顺序执行(通过 ZXID 保证)。
轻量级数据存储在内存中,通过快照(Snapshot)持久化。

适用场景:分布式锁、配置中心、注册中心、选主等强一致性协调场景。
慎用场景:高频读写(如秒杀系统)——此时 Redis 更合适。
引用来源:
: Zookeeper 在分布式系统中的作用
: Zookeeper 分布式存储系统实现
: ZooKeeper 分布式锁的适用场景分析

思维导图

在这里插入图片描述


ZooKeeper 技术原理详解

1. 核心架构
  • 集群模式:采用奇数节点(2n+12n+12n+1)部署,通过 ZAB 协议(ZooKeeper Atomic Broadcast)实现强一致性。
  • 角色划分:
    • Leader:处理写请求,发起提案(Proposal)
    • Follower:处理读请求,参与投票
    • Observer:扩展读能力,不参与投票
  • 数据流:
    Client→WriteLeader→ProposalFollower/Observer→ACKLeader→CommitAll \text{Client} \xrightarrow{\text{Write}} \text{Leader} \xrightarrow{\text{Proposal}} \text{Follower/Observer} \xrightarrow{\text{ACK}} \text{Leader} \xrightarrow{\text{Commit}} \text{All} ClientWrite​LeaderProposal​Follower/ObserverACK​LeaderCommit​All
2. 核心算法
  • ZAB 协议(消息广播 + 崩溃恢复):

    1. 消息广播:Leader 生成全局单调递增的 ZXID(64位:高32位为epoch,低32位为计数器),通过两阶段提交保证一致性:
      多数派确认
      Leader 生成 Proposal
      广播 Proposal
      Follower ACK
      广播 Commit
    2. 崩溃恢复(选主):
      • 优先选择 ZXID 最大的节点
      • ZXID 相同时选择 myid 最大的节点
      • 基于 TCP Fast Leader Election 算法(避免活锁)
  • 数据持久化:

    • 事务日志:顺序写磁盘(性能关键)
    • 内存快照:定期生成 Snapshot 压缩存储
3. 数据结构
  • ZNode 树(类似文件系统):

    / (根节点)
    ├── /service  # 服务注册目录
    │   ├── node1 [EPHEMERAL]  # 临时节点
    │   └── node2 [SEQUENTIAL] # 顺序节点(自动追加序号)
    └── /config   # 配置节点
         └── db_url [PERSISTENT] # 持久节点
    
  • 节点类型:

    类型特性应用场景
    持久节点会话结束仍存在配置存储
    临时节点会话结束自动删除服务注册
    顺序节点名称追加全局序号分布式锁
  • 元数据结构:

    class ZNode {
      byte[] data;      // 节点数据(≤1MB)
      Stat stat;        // 元数据(版本号、时间戳等)
      List<String> children; // 子节点列表
    }
    
4. 核心组件功能
组件功能实现机制
Watch 机制事件监听客户端注册一次性监听器,服务端触发事件后删除
ACL 控制权限管理基于 Scheme(ip/digest/world)的权限验证
Session会话管理心跳检测(tickTime),超时释放临时节点
ZKDatabase内存数据库维护 ZNode 树 + 事务日志
5. 优缺点分析

✅ 优点:

  1. 强一致性(线性写)
  2. 高可用(n+1n+1n+1 容错)
  3. 轻量级协调(内存操作)
  4. 丰富的原语(锁/队列/屏障)

❌ 局限:

  1. 数据量限制(全内存存储)
  2. 写性能瓶颈(需半数以上节点ACK)
  3. Watch 丢失风险(一次性触发)
  4. 无内置负载均衡

适用场景:配置中心、分布式锁、选主(强一致性优先)
慎用场景:高频写操作(>10K QPS)、大数据存储(>GB级)


Java 示例代码(带中文注释)
1. 基础操作(节点创建/读取)
import org.apache.zookeeper.*;

public class ZKBasicDemo {
    private static final String ZK_ADDRESS = "localhost:2181";
    private static final int SESSION_TIMEOUT = 3000;
    private ZooKeeper zk;

    // 连接 ZooKeeper
    public void connect() throws Exception {
        zk = new ZooKeeper(ZK_ADDRESS, SESSION_TIMEOUT, watchedEvent -> {
            // Watch 回调函数(此处简化处理)
            System.out.println("Watch 触发: " + watchedEvent.getType());
        });
        System.out.println("连接状态: " + zk.getState());
    }

    // 创建持久节点
    public void createNode(String path, byte[] data) throws Exception {
        String createdPath = zk.create(
            path, 
            data,
            ZooDefs.Ids.OPEN_ACL_UNSAFE, // ACL 权限(完全开放)
            CreateMode.PERSISTENT        // 节点类型(持久节点)
        );
        System.out.println("已创建节点: " + createdPath);
    }

    // 读取节点数据
    public byte[] readNode(String path) throws Exception {
        return zk.getData(path, false, null); // 不注册 Watch
    }

    public static void main(String[] args) throws Exception {
        ZKBasicDemo demo = new ZKBasicDemo();
        demo.connect();
        demo.createNode("/test-node", "Hello ZK".getBytes());
        System.out.println("节点数据: " + new String(demo.readNode("/test-node")));
    }
}
2. 分布式锁实现
import org.apache.curator.framework.CuratorFramework;
import org.apache.curator.framework.recipes.locks.InterProcessMutex;

public class DistributedLock {
    private final InterProcessMutex lock;
    private final String lockPath = "/locks/resource";

    public DistributedLock(CuratorFramework client) {
        this.lock = new InterProcessMutex(client, lockPath);
    }

    public void doWithLock() {
        try {
            // 获取锁(阻塞等待)
            lock.acquire(); 
            System.out.println("获得锁,执行临界区操作");
            Thread.sleep(1000); // 模拟业务操作
        } catch (Exception e) {
            e.printStackTrace();
        } finally {
            try {
                // 释放锁
                lock.release(); 
            } catch (Exception e) {
                e.printStackTrace();
            }
        }
    }
}
3. 服务注册(临时节点)
public class ServiceRegistry {
    private ZooKeeper zk;
    
    public void registerService(String serviceName, String uri) throws Exception {
        String servicePath = "/services/" + serviceName;
        // 创建临时节点(会话结束自动删除)
        zk.create(
            servicePath + "/node", 
            uri.getBytes(),
            ZooDefs.Ids.OPEN_ACL_UNSAFE,
            CreateMode.EPHEMERAL_SEQUENTIAL // 临时顺序节点
        );
        System.out.println("服务已注册: " + servicePath);
    }

    // 服务发现(监听节点变化)
    public void discoverServices(String serviceName) throws Exception {
        String servicePath = "/services/" + serviceName;
        // 注册 Watch 监听子节点变化
        List<String> services = zk.getChildren(servicePath, event -> {
            if (event.getType() == Event.EventType.NodeChildrenChanged) {
                updateServiceList(servicePath); // 更新服务列表
            }
        });
        updateServiceList(servicePath);
    }

    private void updateServiceList(String path) {
        // 获取最新服务节点列表
        // 通常从节点数据中解析服务地址(如 IP:Port)
    }
}
引用来源:
ZooKeeper 的 ZAB 协议原理分析
ZooKeeper 内部数据结构设计
分布式系统协调服务对比研究
思维导图

在这里插入图片描述


一、ZAB 协议如何保证数据一致性?

ZAB(ZooKeeper Atomic Broadcast)协议通过以下机制保证数据一致性:

  1. 两阶段提交(2PC):
    • Proposal 阶段:Leader 将写请求广播为 Proposal(含 ZXID)
    • Commit 阶段:收到 ⌊n2⌋+1\lfloor \frac{n}{2} \rfloor +1⌊2n​⌋+1 个 ACK 后广播 Commit
  2. 崩溃恢复机制:
    • 选举 ZXID 最大的节点为新 Leader
    • 新 Leader 用 epoch 值(单调递增)标记新周期,拒绝旧 epoch 的请求
    • 数据同步:新 Leader 强制 Follower 同步最新数据
  3. ZXID 全局有序:
    • ZXID = ⟨epoch,counter⟩\langle epoch, counter \rangle⟨epoch,counter⟩(高32位epoch,低32位事务计数器)
    • 所有事务严格按 ZXID 顺序执行

数学保证:
设集群节点数为 nnn,写操作需满足 n−f>n2n - f > \frac{n}{2}n−f>2n​(fff 为故障节点数)

二、服务注册中心实现与节点设计

节点设计
节点层级路径示例类型作用
服务根节点/services持久节点(PERSISTENT)服务分类容器
服务类节点/services/order持久节点(PERSISTENT)存储同类型服务实例
服务实例节点/services/order/host1:8080临时节点(EPHEMERAL)存储实例IP+端口(自动删除)
故障自动摘除实现
// 服务注册(临时节点)
zk.create("/services/order/host1:8080", 
          "192.168.1.1:8080".getBytes(),
          ZooDefs.Ids.OPEN_ACL_UNSAFE,
          CreateMode.EPHEMERAL);  // 会话结束自动删除

// 服务发现(监听节点变化)
List<String> instances = zk.getChildren("/services/order", event -> {
    if (event.getType() == Event.EventType.NodeChildrenChanged) {
        updateInstances(); // 重新获取实例列表
    }
});

原理:临时节点随会话终止自动删除,客户端通过 Watch 实时感知变化

三、ZooKeeper vs Redis 分布式锁性能差异

性能对比根源
维度ZooKeeperRedis
锁实现临时顺序节点+WatchSETNX+EXPIRE+Lua脚本
一致性强一致性(ZAB协议)最终一致性(主从异步复制)
网络开销每次操作需集群交互(高延迟)单节点内存操作(低延迟)
吞吐量3K-5K QPS(受限于集群协调)100K+ QPS(内存操作)
锁释放会话结束自动释放(可靠)依赖超时机制(可能误删)

Redis 哨兵切换失效场景:

  1. 客户端A在主节点加锁成功
  2. 主节点宕机,锁未同步到从节点
  3. 哨兵提升从节点为新主
  4. 客户端B在新主节点加锁成功 → 锁冲突
    解决方案:使用 Redlock 算法(多实例多数派确认)

四、Watch 机制局限性及优化

原生局限性
  1. 一次性触发:事件触发后 Watch 自动失效
  2. 丢失风险:
    • 客户端与服务器断连时事件丢失
    • 事件触发到重新注册的间隙状态变化不可见
  3. 无历史事件:新监听者无法获取注册前的变更
优化方案
  1. Curator 持久化 Watcher
// 使用Curator NodeCache持续监听
NodeCache cache = new NodeCache(client, "/config");
cache.getListenable().addListener(() -> {
    byte[] data = cache.getCurrentData().getData();
    System.out.println("配置更新: " + new String(data));
});
cache.start(true); // 首次启动触发初始化事件
  1. 版本号校验
Stat stat = zk.exists("/data", false);
int localVer = stat.getVersion(); // 记录当前版本
// 当事件触发时
Stat newStat = zk.exists("/data", true);
if(newStat.getVersion() > localVer) {
    // 处理更新
}
  1. 事件队列中继:通过 Kafka 中转 Watch 事件,确保可靠传递

五、集群节点数为奇数的数学原理

设集群节点数 nnn,故障节点数 fff,需满足:
n−f>n2⇒f<n2 n - f > \frac{n}{2} \quad \Rightarrow \quad f < \frac{n}{2} n−f>2n​⇒f<2n​

节点数最大容错 fff最小存活节点存活节点是否过半
3122>1.52 > 1.52>1.5 ✓
4133>23 > 23>2 ✓
5233>2.53 > 2.53>2.5 ✓

关键结论:

  • 3节点和4节点容错能力相同(f=1f=1f=1)
  • 奇数节点更节省资源(5节点容错能力优于4节点)
  • 偶数节点可能脑裂风险(如4节点分裂为2+2时无法形成多数派)

六、ZAB 协议如何解决脑裂问题

脑裂场景:网络分区导致多个 Leader 同时存在
Epoch 机制防御步骤:

  1. 新 Leader 选举时递增 epoch 值(全局单调递增)
  2. 所有 Proposal 携带 ⟨epoch,ZXID⟩\langle epoch, ZXID \rangle⟨epoch,ZXID⟩
  3. Follower 只接受最新 epoch 的 Leader 指令
  4. 旧 Leader 恢复后,其 epoch 值过期的 Proposal 被拒绝

示例:

  • 分区1:Leader epoch=3 提交 Proposal
  • 分区2:新 Leader epoch=4 生效
  • 网络恢复后,epoch=3 的 Proposal 被丢弃

七、etcd 的 MVCC 机制优化 Watch

与 ZooKeeper 对比:

维度ZooKeeper Watchetcd Watch(MVCC 优化)
事件存储仅最新状态保存历史事件(可配置保留版本数)
监听起点只能从当前状态开始支持指定 revision 监听历史事件
事件类型仅通知节点变化提供键值对的完整变更记录(PUT/DEL)
压缩机制无周期性压缩旧版本,减少存储开销

MVCC 监听示例:

# 监听从 revision 1000 开始的所有 key 变化
etcdctl watch --prefix / --rev=1000

优势:

  1. 新客户端可获取注册前的历史变更
  2. 事件丢失后可通过 revision 重新追赶
  3. 支持事件流式传输(gRPC 长连接)

八、ZooKeeper ACL 细粒度控制

ACL 结构:scheme:id:permissions
权限设计示例:

// 创建用户认证
zk.addAuthInfo("digest", "admin:password".getBytes());

// 定义ACL规则(用户级权限)
List<ACL> acls = new ArrayList<>();
acls.add(new ACL(ZooDefs.Perms.READ, new Id("auth", "user1:") );  // 用户1只读
acls.add(new ACL(ZooDefs.Perms.ALL, new Id("auth", "admin:") );   // 管理员全权

// 应用ACL创建节点
zk.create("/config", 
          "data".getBytes(), 
          acls, 
          CreateMode.PERSISTENT);

权限类型:

  • CREATE:创建子节点
  • READ:读取数据
  • WRITE:写入数据
  • DELETE:删除节点
  • ADMIN:设置 ACL

九、ZXID 溢出问题与预防

风险分析
  • ZXID 低32位为事务计数器(最大值 232−1=4,294,967,2952^{32}-1=4,294,967,295232−1=4,294,967,295)
  • 按 1万 QPS 计算,约 5年 后溢出
  • 溢出后旧事务 ZXID > 新事务,导致数据错乱
解决方案
  1. 定期清理快照
# 清理7天前的快照和日志
zkCleanup.sh -n mycluster -d 7
  1. 监控预警
// 检查ZXID增长率
long currentZxid = zk.getSessionId();
long daysToOverflow = (4294967295L - currentZxid) / (qps * 86400);
if(daysToOverflow < 365) {
    alert("ZXID将在" + daysToOverflow + "天后溢出!");
}
  1. 升级64位ZXID:使用社区补丁扩展计数器至64位
引用来源:
ZAB协议原理与容错分析
分布式锁在哨兵模式下的失效场景
etcd MVCC机制设计文档
思维导图

在这里插入图片描述

从零开始:手把手教你检查并更新英伟达GPU驱动和CUDA版本(Windows/Linux双平台) 本文详细指导如何在Windows和Linux系统上检查并更新英伟达GPU驱动和CUDA版本,解决版本不匹配导致的常见问题。涵盖驱动更新、CUDA Toolkit安装、版本冲突排解及性能优化技巧,帮助开发者高效管理GPU计算环境。 阅读详情

相关推荐

树莓派5外接RTX显卡:从PCIe到驱动的完整踩坑指南

在ARM架构与GPU加速的交汇点,树莓派5凭借其PCIe接口为DIY爱好者打开了外接独立显卡的大门。然而,PCIe x1的带宽限制、供电差异以及NVIDIA驱动在ARM Linux上的兼容性,使得这一组合成为一场高强度的系统底层排错训练。从理解PCIe总线原理、驱动加载机制到CUDA环境配置,每一步都充满挑战。本文以工程实践视角,梳理外接RTX显卡的完整流程、常见故障与性能瓶颈,并探讨其在边缘计算、AI推理等场景下的真实价值,帮助你理性评估这一实验性方案的可行性与替代路径。

chubaisheng8627的博客 352

【Zookeeper】Windows下安装Zookeeper(全面)

【Zookeeper】Windows下安装Zookeeper(全面)

weixin_57259781的博客 1万+

KEGG两类报错--①No gene can be mapped--②URL ‘https://rest.kegg.jp/link/hsa/pathway‘…

版本问题,重新安装一下clusterProfiler包。网络问题,可以等待之后再试一下(试过不是)(以上可以排除基因不存在的错误因素)

weixin_57699783的博客 2万+

Zookeeper

Zookeeper笔记

panzhengxiang的博客 2358

多期DID实战指南:从CSDID原理到分组加权策略

本文深入解析多期DID(CSDID方法)在政策评估中的实战应用,从核心思想到分组加权策略全面讲解。通过电商扶贫等案例,详细演示如何正确处理分批实施政策的数据分析,包括分组拆解、子模块DID操作及加权平均选择,帮助研究者规避常见误区,提升政策评估的准确性。

weixin_26833503的博客 531

【系统架构设计师-2026上半年真题】综合知识-参考答案及详解(75题完全回忆版)

【系统架构设计师-2026上半年真题】综合知识-参考答案及详解(75题完全回忆版)

数据知道的博客 3122

Kubernetes 上部署 ZooKeeper 集群:incubator/zookeeper Helm Chart 实战指南

本指南围绕 Helm Charts 仓库中 [incubator/zookeeper](https://link.gitcode.com/i/5eda359b3dbce564dcc7c7664afd225b) 这一官方孵化器图表展开,系统讲解如何在 Kubernetes 1.10+ 集群上以 StatefulSet 方式部署一个固定规模的 ZooKeeper 3.5 集群,包括安装验证、全部可配置

gitblog_00705的博客 1202

OpenFeign整合Sentinel实现熔断降级

常用于实现熔断降级的框架有Hystrix、Sentinel,我们常说的Spring Cloud项目说的其实是Spring Cloud Netflix,Hystrix以及前面学习过的Ribbon都是Netflix系的家族成员,所以使用Hystrix可以非常简单的与当前项目中使用到的OpenFeign、Ribbon整合,但笔者并没有选择Hystrix,而是选择阿里系的Sentinel。 为什么选择Sentinel而不是Hystrix?从接入简单考虑可能选择Hystrix是不错的选择,但笔者对Hyst...

吴就业 6719

ZooKeeper 安装完整版——ZooKeeper3.4.6

@羲凡——只为了更好的活着 ZooKeeper 安装完整版——ZooKeeper3.4.6 1.下载地址如下: https://archive.apache.org/dist/zookeeper/zookeeper-3.4.6/ 2.安装 第1步:在deptest3 机器的 /usr/local/package 目录下解压 zookeeper-3.4.6.tar.gz tar -zxf zook...

@羲凡—只为更好的活着 1万+

RK3399外设驱动之MIPI

RK3399外设驱动之MIPI 文章目录RK3399外设驱动之MIPIMIPI命令解析入口代码mipi显示配置实例rk3399mipi驱动rk mipi驱动注册过程rk32_mipi_dsi.c解析 内核版本 Linux4.4 平台 rk3399 作者 nineyole MIPI命令解析入口代码 MIPI的入口代码如下:kernel\drivers\video\rockchip\screen\lcd_mipi.c static int __init rk_mipi_screen_in

学无止境 2231

MIKE水动力笔记13_数字化海图2之克里金插值

在进行MIKE水动力建模之初,需要准备好水深数据,本专题系列博文主要讲解如何将扫描版JPG格式海图数据在ArcGIS中进行数字化并制作成xyz水深地形数据,用的克里金插值方法,仅供参考。

晏长街的博客 2881

Zookeeper 和 SASL

关键字:Zookeeper 和 SASL 介绍 这是一个描述ZooKeeper和SASL(Simple Authentication and Security Layer)整合建议的设计文档。 JIRA 和 源代码 JIRA问题ZOOKEEPER-938,来自JIRA的可用补丁。 请注意:这个JIRA文章只描述了客户端-服务器的相互认证。服务器-服务器的相互认证存在单独的JIRA:Z...

赵士杰的博客 5212

LoRa无线通信技术介绍(六)SX127X芯片收发程序讲解

接收LORA芯片SX127X的收发程序。

DT程序员的博客 1752

【Zookeeper】Zookeeper入门解析

一、ZooKeeper概述 1.Zookeeper简介 (1)Zookeeper是一个分布式协调服务的开源框架。主要用来解决分布式集群中应用系统的一致性问题 (2)ZooKeeper本质上是一个分布式的小文件存储系统。提供基于类似于文件系统的目录树方式的数据存储,并且可以对树中的节点进行有效管理。从而用来维护和监控你存储的数据的状态变化。通过监控这些数据状态的变化,从而可以达到基于数据的集群...

Together 7211

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

C# WinForm 基于DirectShow.dll编写的程序,可边预览边保存视频,音频和图片

基于微软的DirectShow.dll的二次开发1.自动识别连接的摄像头跟麦克风且可以对其进行选择(默认选中第一个)2.可录制wmv和avi两种格式的视频并且都带有音频,avi可以录制的分辨率和帧数进行选择,wmv默认进行了淸晰度优化如不喜欢可去除代码中有相关提示3.可在预览点开之后进行拍照,也可边录制视频边拍照4.添加了视频和音频的压缩功能(酌情使用)这次二次开发发现C#对DirectShow的相关信息太少,这次做完也不敢藏私共享出来,还望大家指正

Spring Boot如何集成Zookeeper(Spring Cloud Zookeeper方案)

本文介绍了Spring Boot集成Zookeeper的两种方案,重点讲解了基于Spring Cloud Zookeeper的实现方式。文章详细说明了开发环境配置、父工程创建、生产者模块搭建过程,包括POM依赖配置、application.yml文件编写以及项目结构组织。通过RestTemplate实现服务调用验证,展示了Zookeeper在服务注册与发现中的应用。整个教程从环境准备到代码实现逐步展开,适合需要快速集成Zookeeper的Spring Boot开发者参考。

城南蝈蝈 1462

霍尼韦尔SoftMaster使用说明

霍尼韦尔SoftMaster使用说明

Python Zookeeper 注册和发现服务

#!/usr/bin/env python # -*- coding: utf-8 -* import time import random import logging from kazoo.client import KazooClient from kazoo.exceptions import NodeExistsError from kazoo.client import Kazoo...

Through Da Storm 3282

温度PID控制PLC程序

温度PID稳定控制程序,适用于欧姆龙PLC,对其他PLC也具有很大参考价值

zookeeper安装教程

zookeeper安装教程

m0_64825044的博客 1463

zookeeper 安装

安装 Hbase的Master需要zookeeper的支持,所以在集群上安装zookeeper。 将zookeeper下载解压到指定的文件夹,修改以下配置后分发到其它的节点。 修改zoo.cfg 这里主要添加了data和logs的路径以及三个服务器ip和端口 tickTime=2000 dataDir=/usr/local/zookeeper/zookeeper-3.4.5/data dataLo...

得克特 826

Docker安装Zookeeper

Docker安装Zookeeper1. 创建主机挂载配置文件2. 生成启动文件 start.sh3. 运行start.sh 启动zookeeper4. 连接zookeeper 1. 创建主机挂载配置文件 [root@wanfei ~]# mkdir -p ~/i/apps/zookeeper/{logs,data} [root@wanfei ~]# cd ~/i/apps/zookeeper/ [...

wnfff的博客 1436

Zookeeper篇.搭建Zookeeper集群

准备工作: 1.准备3台机器,下面以A、B、C表示 2.配置3台机器免密码登录,参考下面链接 https://blog.youkuaiyun.com/lwf006164/article/details/93380023 A机器 第一步:下载安装包,版本是3.4.9 //下载链接 链接:https://pan.baidu.com/s/1WAk5EUgDEW7xWX5RMvLjgA //提取码 提取码:lopf ...

lwf006164的博客 952

linux zookeeper 端口号,linux下zookeeper安装

zookeeper安装需要依赖 jdk 或jre1.下载jdk2.解压jdktar -zxvf jdk-8u221-linux-x64.tar.gz3.配置jdk环境变量export JAVA_HOME=/usr/java/jdk1.8.0_221export JAVA_PATH=${JAVA_HOME}/binexport PATH=$PATH:${JAVA_PATH}配置好后需要刷新文件sou...

weixin_33542859的博客 1528

安装Zookeeper集群

安装Zookeeper集群1 环境准备和下载zookeeper2 解压并创建文件夹3 修改环境变量和zookeeper配置文件4 启动和关闭 1 环境准备和下载zookeeper zookeeper优秀的博客 zookeeper下载页面 准备3台机器,都安装好java,并解压好zookeeper 2 解压并创建文件夹 第一步:解压 tar -zxvf zookeeper-3.4.13.tar.gz...

Java Spring Elasticsearch 871

zookeeper本地模式

HADOOPHA场景下,即使Active节点发生故障,系统也不会自动触发从Active到Standby的故障转移。 需要进行手动的故障转移。 手动故障转移显然不是我们所需要的解决方案。 为了实现自动故障转移, 需要引入两个新组件:ZooKeeper和ZKFailoverController(ZKFC)进程。 Apache ZooKeeper是一种高可用性服务,用于维护少量协调数据,通知客户端该数据的更改以及监视客户端 是否存在故障。自动故障转移的实现依赖于ZooKeeper来实现以下功能: 故障检测:集

weixin_40645193的博客 986

zookeeper总结

HADOOPHA场景下,即使Active节点发生故障,系统也不会自动触发从Active到Standby的故障转移。 需要进行手动的故障转移。 手动故障转移显然不是我们所需要的解决方案。 为了实现自动故障转移, 需要引入两个新组件:ZooKeeper和ZKFailoverController(ZKFC)进程。 Apache ZooKeeper是一种高可用性服务,用于维护少量协调数据,通知客户端该数据的更改以及监视客户端 是否存在故障。自动故障转移的实现依赖于ZooKeeper来实现以下功能: 故障检测:集

weixin_40645193的博客 800

zookeeper

安装Java环境 tar zxf jdk-8u212-linux-x64.tar.gz -C /data/server vim /etc/profile添加: JAVA_HOME=/data/server/jdk1.8.0_212 export JRE_HOME=/data/server/jdk1.8.0_212/jre export CLASSPATH=.:$JAVA_HOME/lib:$JRE...

suiyu_eran_的博客 460

zookeeper ——— linux 部署 zookeeper

1:下载zookeeper压缩文件 wgethttp://mirror.bit.edu.cn/apache/zookeeper/zookeeper-3.5.6/apache-zookeeper-3.5.6-bin.tar.gz (不要下载 apache-zookeeper-3.5.6.tar.gz, 这个解压会缺 lib 的包 , 最后客户端连接的时候会报错 ...

DGH2430284817的博客 860
上一篇: Apache Kafka
下一篇: Redis
HuiSoul200
博客等级 码龄8年 274粉丝 82原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值