zookeeper集群部署配置dataDir路径踩坑记录

最新推荐文章于 2025-03-13 06:57:58 发布

michaelwrong

最新推荐文章于 2025-03-13 06:57:58 发布

阅读量6.5k

点赞数 2

分类专栏： BigData 文章标签： zookeeper zoo.cfg dataDir connection

本文链接：https://blog.youkuaiyun.com/michaelwrong/article/details/89176587

版权

BigData 专栏收录该内容

3 篇文章

订阅专栏

zookeeper集群部署要求，在每台机器上修改myid下的server标识，例如

dataDir=/home/jsp/data/zookeeper
dataLogDir=/home/jsp/logs/zookeeper

server.1=s100:2888:3888
server.2=s200:2888:3888
server.3=s300:2888:3888

其中dataDir的目录不支持~路径，我一开始用~/data/zookeeper就死活不行，一直报connect的错误，这个地方真的是大坑啊，以后记住要用绝对路径！！！！

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

michaelwrong

关注关注

2
点赞
踩
2

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

ZooKeeper运维——数据备份与恢复（事务日志+快照日志，万字总结，你想要的都有

2401_83739951的博客

04-12

1142

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

记录下 zookeeper 集群迁移和易错点

Nicksxs的专栏

05-31

343

前阵子做了zk 的集群升级迁移，大概情况是原来是一个三节点的 zk 集群（最小可用大概是 zk1 192.168.2.1 zk2 192.168.2.2 zk3 192.168.2.3 在 zoo.cfg 中的配置就是如下 server.1=192.168.2.1:2888:3888 server.2=192.168.2.2:2888:3888 server.3=192.168.2.3:2888:3888

1 条评论您还未登录，请先登录后发表或查看评论

ZooKeeper 安装配置

Heqianqian的博客

11-19

1404

一. ZooKeeper的搭建方式安装方式有三种：单机模式只运行在一台服务器上，适合测试环境伪集群模式一个物理机器上运行多个ZooKeeper 集群模式运行于一个集群上，适合生产环境 ZooKeeper通过复制来实现高可用性，只要集合数中半数以上的机器处于可用状态，就可以保证服务继续。之所以要超过半数，设计到ZooKeeper的复制策略，保证对Znode树的每一个修改都会被复制到集合

Zookeeper（104）如何在生产环境中备份和恢复Zookeeper的数据？

最新发布

qq_43012298的博客

03-13

542

在生产环境中备份和恢复 ZooKeeper 的数据是确保数据安全和系统可靠性的重要步骤。通过定期备份 ZooKeeper 的数据目录和日志目录，可以在灾难发生时快速恢复数据。使用脚本和定时任务可以自动化备份过程，而在恢复时需要小心操作，确保数据的一致性和完整性。合理的备份和恢复策略可以有效地保护 ZooKeeper 集群中的关键数据。

配置zookeeper集群踩坑

qq_51325402的博客

03-06

202

配置zookeeper集群踩坑+配置详解（问题已解决）

Zookeeper-datadir

gohigher2018的博客

05-27

5408

1、事务日志文件目录［对磁盘性能要求高，因为，zk在返回client端事务请求响应之前，必须将本次请求对应的事务日志写入到磁盘中。最好单放一块盘］ 2、快照数据在完成若干次事务日志之后（在ZK中，凡是对数据有更新的操作，比如创建节点，删除节点或是对节点数据内容进行更新等，都会记录事务日志），ZK会触发一次快照（snapshot），将当前server上所有节点的状态以快照文件的形式dump到磁...

windows环境下安装zookeeper时zoo.cfg设置的dataDir和dataLogDir不起作用

热爱诗与歌，享受编程每一刻。

12-27

3219

刚开始设置的是 dataDir=D:\zk\data dataLogDir=D:\zk\log 启动zkServer.cmd之和发现指定的data和log位置不起作用。发现是必须双\\才可以，于是改成 dataDir=D:\\zk\\data dataLogDir=D:\\zk\\log 重新启动，顺利解决。 ...

zookeeper

LiangKe_GLX的博客

09-24

586

Zookeeper简介分布式系统定义面临的问题我们将分布式系统定义为：分布式系统是同时跨越多个物理主机，独立运行的多个软件组成的系统。分布式系统优点显而易见，人多干活块，并且互为备份。但是缺点也随之而来，以一个小研发团队为例，假设我们有个5人研发团队，要开始项目的研发，会面临以下几种问题：解决上诉问题的方法就是让信息同步。分布式系统的协调工作就是通过某种方式让各个节点的信息能够同步和共享。这依赖于服务进程之间通信，通信方式有两种：通过网络进行信息共享犹如现实生活一样，leader会在会议上将

zookeeper和kafka集群搭建-错误集合

路漫漫兮

07-15

937

1. 出现 zookeeper server is not running 问题排查解决方案在zoo.cfg文件中加入下面配置 maxClientCnxns=60 standaloneEnabled=false admin.enableServer=true 2. 出现 Error: JAVA_HOME is not set and java could not be found in PATH. 问题排查 zookeeper是在java环境中运行的，这里是没有指定jdk路径解决方案如图就行，如果

ZooKeeper 源码和实践揭秘

腾讯技术工程

04-20

1604

作者：runnerzhang，腾讯 CSIG 后台开发工程师ZooKeeper 是个针对大型分布式系统的高可用、高性能且具有一致性的开源协调服务，被广泛的使用。对于开发人员，ZooKee...

Centos7下HBase安装与配置（亲测！）

蔡政洁的博客

06-20

8282

目录Centos7下Hadoop完全分布式安装第一步：安装软件（1）上传文件（2）解压文件第二步：配置环境变量第三步：修改配置文件（1）修改hbase-env.sh配置文件（2）修改hbase-site.xml配置文件（3）修改regionservers 文件（4）配置backup-masters （可选）第四步：分发配置文件第五步：启动与检测第六步：常见问题总结 Centos7下Hadoop完全分布式安装电脑系统：macOS 10.15.4 虚拟机软件：Parallels Desktop14 Hado

centos7 HA高可用完全分布式hadoop集群搭建（三台机器）

BackToMe的博客

08-29

1707

1. 集群规划机器IP 服务 master:192.168.159.100 zookeeper、namenode、datanode、ResourceManager、JournalNode slave1:192.168.159.101 zookeeper、namenode、datanode、ResourceManager、JournalNode slave2:192.168...

zookeeper配置文件说明

奋斗的新丁

11-26

1233

Zookeeper中的配置文件zoo.cfg中参数含义解读如下： 1．tickTime =2000：通信心跳数，Zookeeper服务器与客户端心跳时间，单位毫秒 Zookeeper使用的基本时间，服务器之间或客户端与服务器之间维持心跳的时间间隔，也就是每个tickTime时间就会发送一个心跳，时间单位为毫秒。它用于心跳机制，并且设置最小的session超时时间为两倍心跳时间。(session的最小超时时间是2*tickTime) 2．initLimit =10：LF初始通信时限集群中的Fol

ZooKeeper自定义数据日志目录

weixin_34050005的博客

04-12

222

安装版本：zookeeper-3.4.10 问题描述： ZooKeeper在启动时会将zookeeper.out输出到当前目录，不仅不友好，有时候可能会因为目录权限问题引发一些不必要的麻烦。脚本分析：通过查看zkServer.sh脚本可以发现，脚本中没有定义ZOO_LOG_DIR变量。将以下这段进行修改 if [ ! -w "$ZOO_LOG_DIR" ] ; then mkdi...

Zookeeper安装

qq_34828100的博客

03-16

275

一.Zookeeper介绍注册中心负责服务地址的注册与查找，相当于目录服务，服务提供者和消费者只在启动时与注册中心交互，注册中心不转发请求，压力较小。使用dubbo-2.3.3以上版本，官方推荐使用zookeeper注册中心。 Zookeeper是Apacahe Hadoop的子项目，是一个树型的目录服务，支持变更推送，适合作为Dubbo服务的注册中心，工业强度较高，...

zookeeper学习一

lsd&xql的博客

08-18

1414

首先redis是一个单实例的，底层使用的是多路复用，并且使用内存来存入数据（快），因redis有单点问题，衍生出复制集群，并从而衍生出高可用（靠sentinel，主机挂了以后选择相应的从机），复制集群的弊端是数据不是绝对的实时同步【并且由于生产环境服务器有各种挂掉的风险，可能连最终一致性都谈不上】，还有集群模式（sharding分片），从而引出完成分布式协调很难，需要使用分布式锁。单个客户端与单台服务器之间的连接数的限制，是ip级别的，默认是60，如果设置为0，那么表明不作任何限制。ZK中的一个时间单元。.

ZooKeeper3.4.6的安装

Sweeneyzuo的博客

11-04

425

Apache ZooKeeper致力于开发和维护开源服务器，实现高度可靠的分布式协调。ZooKeeper是一种集中式服务，用于维护配置信息，命名，提供分布式同步和提供组服务。所有这些类型的服务都以分布式应用程序的某种形式使用。每次实施它们都需要做很多工作来修复不可避免的错误和竞争条件。由于难以实现这些类型的服务，应用程序最初通常会吝啬它们，这使得它们在变化的情况下变得脆弱并且难以管理。即使正确完...

Zookeeper配置文件详解

weixin_38473754的博客

10-11

1834

zoo.cfg详解1.tickTime2.initLimit3.syncLimit4.dataDir5.clientPort6.dataLogDir7.server.index=IP:A:B 1.tickTime tickTime=2000 这个属性表示心跳时间间隔，Leader用来监听Follower的心跳，一旦挂掉一半以上Follower，会通过Zab(消息原子广播)协议使集群所有个体状态转...

Zookeeper基础操作

渔阳的博客

08-02

3300

Zookeeper基础操作。

Zookeeper集群部署与配置指南

3. **配置zoo.cfg**: 复制ZooKeeper的默认配置文件`zoo_sample.cfg`并重命名为`zoo.cfg`，然后编辑`zoo.cfg`，设置`dataDir`和`dataLogDir`指向刚刚创建的目录，并配置服务器节点信息，如`server.1=10.10.76.11:2888...