Zookeeper 默认SessionTimeout

最新推荐文章于 2022-07-04 14:31:46 发布
最新推荐文章于 2022-07-04 14:31:46 发布
阅读量1.5k 收藏
点赞数
CC 4.0 BY-SA版权
文章标签： 大数据 java
原文链接：https://yq.aliyun.com/articles/476810
本文探讨了Hive在连接Zookeeper时遇到的超时问题，揭示了Hive设置的sessionTimeout远大于Zookeeper默认配置的最大会话超时时间导致的日志现象，并解释了Zookeeper默认配置中ticktime参数如何影响最小和最大会话超时时间。

Hive在连Zookeeper时发现ZK的日志里都是类似：

Gota Connection with timeout 40000ms

Hive在获取锁创建ZK连接时传入的默认sessionTimeout是10min，为什么到ZK Server这里变成40s呢？

这和ZK的默认配置有关，默认的配置只是有ticktime=2000ms，而默认的minSessionTimeout=2*ticktime,maxSessionTimeout=20*ticktime，因此，当Hive连过来时由于10min >> maxSessionTimeout，才有日志里面的结果.


本文转自MIKE老毕 51CTO博客，原文链接：http://blog.51cto.com/boylook/1315758，如需转载请自行联系原作者

ZooKeeper的会话机制Session
MuErHuoXu的博客
01-10 5275
为什么会有会话机制Session 首先我们看下ZooKeeper的架构图，client跟ZooKeeper集群中的某一台server保持连接，发送读/写请求，读请求直接由当前连接的server处理，写请求由于是事务请求，由当前server转发给leader进行处理。同时，client还能接收来自server端的watcher通知。 而所有的这些交互，都是基于client和ZooKeeper的se...
修改Elastic-Job默认session过期时间提升故障转移速度
jmysql的博客
06-21 438
将自己进大厂前花2万多买的Python教程，整整370集，少走99%的弯路，免费分享给大家~拿走不谢！学不会退出IT界！_哔哩哔哩_bilibili
Zookeeper中Session Timeout的那些事
weixin_30883271的博客
02-25 1002
前言： RDS系统致力于MySQL数据的高可用，高可靠，高性能以及在线扩展功能，实现这些特性的主要逻辑功能都运行在管理服务器上，一旦管理服务器宕机，数据库的在线扩展功能／备份功能／故障恢复功能等都无从谈起。然而，之前RDS系统管理服务器却是单点服务，为了保证整个系统的稳定性，管理服务器需要实现高可用，结合当前主流的高可用方案，决定使用Zookeeper来实现服务的高可用。 基本设计方案原理： ...
Spring Cloud Zookeeper
Carrieº 的博客
11-07 495
Spring Cloud Zookeeper 该项目通过自动配置并绑定到Spring环境和其他Spring编程模型成语，为Spring Boot应用程序提供Zookeeper集成。通过几个简单的注释，您可以快速启用和配置应用程序中的常见模式，并使用基于Zookeeper的组件构建大型分布式系统。提供的模式包括服务发现和配置。智能路由（Zuul）和客户端负载平衡（Ribbon），断路器（Hystri...
记一次zookeeper连接慢的问题和解决方法
随便写写
07-22 8579
1. 环境 服务器：CentOS Linux release 7.9.2009 (Core) zookeeper：3.6.3 java：1.8.0_231 2. 问题 zookeeper客户端连接到zookeeper节点有20秒的延迟，而且每次都是20秒。自己编写客户端进行测试，通过日志看到在某个环节上会出现阻塞，导致延迟。 15:49:12.424 [main] INFO org.apache.zookeeper.ZooKeeper - Initiating client connection, con
zookeeper sessiontimeout session 会话
xiaoliuliu2050的专栏
09-07 1万+
会话的作用： zk客户端和服务器在建立socket长连接的时候，服务器端创了一个session ,用来存储这次会话用到的一些消息。 因为网络原因或者服务器原因，socket 断开，客户端尝试重新连接，等到重新连接上，发现之前的session已经不在了这时候服务器会告诉客户端会话超时，客户端会关闭session，然后开启新的session.。 服务器会定时判断session 是否超时，如果超时...
springboot配置文件设置zookeeper的sessiontimeout
05-25
在 Spring Boot 应用程序中...`spring.cloud.zookeeper.sessionTimeout` 是指定 ZooKeeper 的会话超时时间，单位为毫秒，默认为 60000 毫秒（即 1 分钟）。在上面的示例中，会话超时时间被设置为 6000 毫秒，即 6 秒。
Zookeeper : 源码入门
syh121的博客
09-09 396
一. 前言 出于对集群选举流程的好奇 , 所以把 Zookeeper 源码拉下来跑了一下 , 这篇文档对这个过程做一个简单的记录. 要想看懂任何源码 , 第一步就是要跑起来 . 这一篇主要介绍 , 如果快速的跑源码 ,同时简单介绍其中的关键点 , 便于处理 二 . 源码的运行 2.1 主启动流程 // Step 1 : Git 拉取 https://github.com/apache/zookeeper.git // Step 2 : 本地运行 (Intellij) 1. 找到 zookeep
ZooKeeper核心知识总结！
weixin_70730532的博客
07-04 636
Apache ZooKeeper 是由Apache Hadoop的子项目发展而来，为分布式应用提供高效且可靠的分布式协调服务。在解决分布式数据一致性方面，ZK没有直接采用Paxos算法，而是采用了ZAB（ZooKeeper Atomic Broadcast）协议。ZK可以提供诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知，集群管理，Master选举，分布式锁，分布式队列等功能。「它具有以下特性：」「顺序一致性」：从一个客户端发起的事务请求，最终都会严格按照其发起顺序被应用到 Zookeeper 中
Zookeeper : session超时设置
热门推荐
金溪的博客
06-05 2万+
（1）tickTime，这是个时间单位定量。 （2）minSessionTimeout, maxSessionTimeout：一般，客户端连接zookeeper的时候，都会设置一个session timeout，如果超过这个时间client没有zookeeper server有联系，则这个session被设置为过期（如果这个session上有临时节点，则会被全部删除），但是这个时间不是客户端可以...
关于zookeeper中session timeout
weixin_30510153的博客
07-20 680
转自https://yq.aliyun.com/articles/117825?t=t1，主要结论如下： 经过源码分析，得出SessionTimeOut的协商如下： 情况1: 配置文件配置了maxSessionTimeOut和minSessionTimeOut 最终SessionTimeOut,必须在minSessionTimeOut和maxSessionTimeOut区间里，如果跨...
【转】ZooKeeper 会话超时
weixin_30296405的博客
11-03 265
原文链接 http://www.chepoo.com/zookeeper-session-timeout.html 1、会话概述 在ZooKeeper中，客户端和服务端建立连接后，会话随之建立，生成一个全局唯一的会话ID(Session ID)。 服务器和客户端之间维持的是一个长连接，在SESSION_TIMEOUT时间内，服务器会确定客户端是否 正常连接(客户端会定时向服务器发送h...
笃行杂记之Zookeeper SessionTimeOut分析
weixin_34044273的博客
07-01 688
0.前言 本文为笃行日常工作记录，烂笔头系列。 源码前面，了无秘密 — by 侯杰 近期的一个C++项目里使用了Zookeeper做服务发现，期间遇到了SessionTimeOut问题的困扰，明明通过zookeeper c client设置了超时时间，但无效。 请原谅我一开始对zookeeper不熟悉。最终通过分析源码了解到Session...
zk配置参数说明
Jonechhc的博客
11-30 3670
参数名 说明 tickTime ZK中的一个时间单元。ZK中所有时间都是以这个时间单元为基础，进行整数倍配置的。例如，session的最小超时时间是2*tickTime。 initLimit 乘以2 初始化 Follower在启动过程中，会从Leader同步所有最新数据，然后确定自己能够对外服务的起始状态。Leader允许F在 initLimit 时间内完成这个工作。通常情况下，我们不用太在
HiveServer2连接ZooKeeper出现Too many connections问题的解决
疯狂的矩阵
07-24 970
HiveServer2连接ZooKeeper出现Too many connections问题的解决 作者: 大圆那些事 | 文章可以转载，请以超链接形式标明文章原始出处和作者信息 网址: http://www.cnblogs.com/panfeng412/archive/2013/03/23/hiveserver2-too-many-zookeeper-connections-issues...
Zookeeper session超时
diaohuyi6830的博客
11-07 440
1、会话概述 在ZooKeeper中，客户端和服务端建立连接后，会话随之建立，生成一个全局唯一的会话ID(Session ID)。服务器和客户端之间维持的是一个长连接，在SESSION_TIMEOUT时间内，服务器会确定客户端是否正常连接(客户端会定时向服务器发送heart_beat，服务器重置下次SESSION_TIMEOUT时间)。因此，在正常情况下，Session一直有效，并...
zookeeper的maxSessionTimeout默认值导致hbase regionserver超时
weixin_34117522的博客
02-17 961
zookeeper的maxSessionTimeout默认值导致hbase regionserver超时 在hbase中经常会遇到regionserver挂掉的情况，查看日志会看到这样的错误信息 2016-02-16 11:51:24,882 WARN [master/hadoop02/192.168.100.5:6000] zookeeper.ZKUti...
zookeeper超时--minSessionTimeout与maxSessionTimeout
xiaolang85的专栏
07-07 2万+
很多同学可能有这样的疑问，我明明把连接zk客户端的超时时间sessionTimeout设置为180秒了，可是为什么仅仅过了40几秒就超时了？     其实只这么设置，根本没有任何作用，因为客户端将sessionTimeout的值传给zk时，zk还会根据minSessionTimeout与maxSessionTimeout两个参数重新调整最后的超时值 Java代码   publ
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值