修改Elastic-Job默认session过期时间提升故障转移速度

最新推荐文章于 2024-08-10 10:05:01 发布

jmysql

最新推荐文章于 2024-08-10 10:05:01 发布

阅读量425

点赞数

分类专栏： java 文章标签： java 开发语言

本文链接：https://blog.youkuaiyun.com/jmysql/article/details/125396204

版权

本文探讨了Elastic-Job在使用Zookeeper时，默认的60s会话超时时间可能导致的故障转移延迟问题。作者提出了解决方案，包括剔除并重写ZookeeperConfiguration类，以自定义更短的会话超时时间，从而加快故障转移的速度。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

将自己进大厂前花2万多买的Python教程，整整370集，少走99%的弯路，免费分享给大家~拿走不谢！学不会退出IT界！_哔哩哔哩_bilibili

在ZooKeeper中，客户端和服务端建立连接后，会话随之建立，生成一个全局唯一的会话ID(Session ID)。Elastic-job 对zookeeper默认session超时时间为 60s，导致一旦出现问题就需要等待60s后才出现故障转移
默认配置在类ZookeeperConfiguration，且该类不支持外部配置

解决方案

调整配置文件

elasticjob.zookeeper.session-timeout-milliseconds=300
elasticjob.zookeeper.connection-timeout-milliseconds=300

a、剔除ZookeeperConfiguration并重写ZookeeperConfiguration文件

@SpringBootApplication(exclude = ElasticJobAutoConfiguration.c

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

jmysql

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Kafka配置文件中的Zookeeper参数

DeoSql的博客

09-24

583

在Kafka的配置文件中，有一些与Zookeeper相关的参数可以进行调整，以满足不同的需求和环境。本文将详细介绍Kafka配置文件中与Zookeeper相关的参数，并提供相应的源代码示例。这个参数用于设置与Zookeeper会话的超时时间，即Kafka与Zookeeper之间的心跳检测间隔时间。如果你的Zookeeper集群在不同的主机上或使用了不同的端口，你需要相应地修改这个参数。这是最重要的Zookeeper参数之一，用于指定Kafka连接到的Zookeeper集群的地址。默认情况下，该参数的值是。

XXL-JOB完全开发手册（一篇学会XXL-JOB所有知识点）

hao_kkkkk的专栏

03-19

1982

如果任务类型为 “GLUE模式”，将会加载 GLue 代码，实例化 Java 对象，注入依赖的 Spring 服务（注意：Glue代码中注入的Spring服务，必须存在与该“执行器”项目的Spring容器中），然后调用execute方法，执行任务逻辑。使用于业务复杂，业务量大，服务器多。调度中心和执行器两个模块分开部署，相互分离，两者之间通过RPC进行通信，其中调度中心主要是提供一个平台，管理调度信息，发送调度请求，自己不承担业务代码，而执行器接受调度中心的调度执行业务逻辑。

参与评论您还未登录，请先登录后发表或查看评论

elasticjob任务启动zk连接超时问题解决

伪开发人员

04-15

5150

版本信息 jdk1.8 elasticjob 3.0.1 spring boot 1.5.22.RELEASE 异常信息 Caused by: org.apache.shardingsphere.elasticjob.reg.exception.RegException: org.apache.zookeeper.KeeperException$OperationTimeoutException: KeeperErrorCode = OperationTimeout 原因分析从异常信息可以看出是zk连

elastic-job分布式调度与zookeeper的简单应用

w1033162186的专栏

11-14

1807

一、对分布式调度的理解调度—>定时任务，分布式调度—>在分布式集群环境下定时任务这件事 Elastic-job（当当⽹开源的分布式调度框架） 1 定时任务的场景定时任务形式：每隔⼀定时间/特定某⼀时刻执⾏例如：订单审核、出库订单超时⾃动取消、⽀付退款礼券同步、⽣成、发放作业物流信息推送、抓取作业、退换货处理作业数据积压监控、⽇志监控、服务可⽤性探测作业定时备份数据⾦融系统每天的定时结算数据归档、清理作业报表、离线数据分析作业 2 什么是分布式调度什么是

源码分析ElasticJob故障失效转移机制

中间件兴趣圈

04-27

4411

本节将探讨ElasticJob故障失效转移机制。我们知道ElasticJob是一款基于Quartz的分布式任务调度框架，这里的分布式是数据的分布式，ElasticJob的核心设计理念是一个任务在多个节点上执行，每个节点处理一部分数据（任务待处理数据分片）。那如果一个任务节点宕机后，则一次任务调度期间，一部分数据将不会被处理，为了解决由于任务节点宕机引起任务一个调度周期的一次任务执行部分数据未处理，...

es-索引过期设置

startyangu的博客

01-25

3213

es-索引过期设置

【Tomcat会话管理】：session持久化与故障转移的5大策略

[【Tomcat会话管理】：session持久化与故障转移的5大策略](https://pcx3.com/wp-content/uploads/2020/07/image-23.png) # 摘要本文深入探讨了Tomcat会话管理机制，包括Session的基本概念、持久化方式以及高可用性...

flink实战--flink原理解析

最新发布

weixin_41544125的博客

08-10

741

简介：流量包过期业务需求和解决方案讲解需求用户购买的流量包都是有时间限制，过期的流量包需要删除逻辑删除、物理删除、或者转移到日志文件归档都行我们这边直接使用物理删除，比数据过多解决方式使用定时任务删除使用场景某个时间定时处理某个任务、发邮件、短信等消息提醒、订单通知、统计报表系定时任务划分单机定时任务单机的容易实现，但应用于集群环境做分布式部署，就会带来重复执行解决方案有很多比如加锁、数据库等，但是增加了很多非业务逻辑分布式调度。

zookeeper-negotiated session timeout

莱布尼兹

09-23

2714

in zookeeper ,during certain io pressure,the client will try to reconnect to quorum.after that,the quorum peer will return a new session timeout (akka negotiatedSessionTimeout) to former,then clie...

SpringBoot 使用 Elastic-Job分布式任务调度框架

小毕超博客

07-19

2661

SpringBoot RedisSession共享 pom  <dependency> <groupId>org.springframework.session</groupId> <artifactId>spring-session-data-redis</artifactId> </depe

Elastic-Job分布式任务调度（2）：Elastic-Job快速入门

u013938578的博客

01-03

1256

此任务在每次执行时获取一定数目的文件，进行备份处理，由File实体类的backedUp属性来标识该文件是否已备份。zookeeper要求采用3.4.6及以上版本。Maven要求3.0.4及以上版本。自行查看我的zookeeper专题。JDK要求1.7及以上版本。

分布式定时任务之1：elasticjob配置使用

licwzy的博客

09-29

5175

最近项目中需要做定时跑批任务，因为是SOA的项目，spring自带的单节点定时任务已经不能满足任务，为了快速上线，选择了当当网开元的elasticjob lite版本。其实使用很简单，几个简单配置就ok了。项目中使用的是simpleJob，我就简单把代码贴一下吧。项目引入elasticjob大致以下几个步骤： 1.pom文件引入相关的依赖 2.编写我们的定时任务 3.编写配置文件...

配置手册 -- elastic-job-lite

yanyuan1993的博客

09-25

1204

1. Java Code配置 a. 注册中心配置用于注册和协调作业分布式行为的组件，目前仅支持Zookeeper。 ZookeeperConfiguration属性详细说明属性名类型构造器注入缺省值描述 serverLists String 是连接Zookeeper服务器的列表包括IP地址和端口号多个地址...

Zookeeper中Session Timeout的那些事

weixin_30883271的博客

02-25

991

前言： RDS系统致力于MySQL数据的高可用，高可靠，高性能以及在线扩展功能，实现这些特性的主要逻辑功能都运行在管理服务器上，一旦管理服务器宕机，数据库的在线扩展功能／备份功能／故障恢复功能等都无从谈起。然而，之前RDS系统管理服务器却是单点服务，为了保证整个系统的稳定性，管理服务器需要实现高可用，结合当前主流的高可用方案，决定使用Zookeeper来实现服务的高可用。基本设计方案原理： ...

Zookeeper session超时

雨和你的故事

04-26

6636

1、会话概述在ZooKeeper中，客户端和服务端建立连接后，会话随之建立，生成一个全局唯一的会话ID(Session ID)。服务器和客户端之间维持的是一个长连接，在SESSION_TIMEOUT时间内，服务器会确定客户端是否正常连接(客户端会定时向服务器发送heart_beat，服务器重置下次SESSION_TIMEOUT时间)。因此，在正常情况下，Session一直有效，并且ZK集群

Elastic Job 入门教程（二）— Spring Boot框架下是实现Elastic Job 脚本作业（Script Job）

helloworld的专栏

09-23

1853

在 Elastic Job 入门教程（一）— 与Spring Boot集成这篇文章中，我们简单介绍了Spring Boot与Elastic Job 的集成，并见简单实现了SimpleJob类型作业。本章，我们介绍Spring Boot框架下如何实现Elastic Job的Script Job类型作业。 ...

elasticJob源码剖析

a379850992的博客

11-10

419

job的执行过程首先从demo开始看 //com.dangdang.ddframe.job.example.JavaMain public static void main(final String[] args) throws IOException { // CHECKSTYLE:ON //zk创建 CoordinatorRegis...

elastic-job使用及过程中遇到的问题

name_z的专栏

07-29

1万+

以前公司的项目分布式调度用的两种方式，一是通过配置文件进行分区，一是用阿里的一个dtss控件；配置文件的方式就不说了，比较挫；而阿里的dtss控件存在问题，而且该控件也已经停止维护更新（别的控件又要收钱）。所以找到了这个elastic-job，目前只用到了其中的SimpleJob，后续的再更新。。。官方文档官网地址：http://elasticjob.io/index_...

Elastic-Job-Lite分布式任务协调服务解析

资源摘要信息:"Elastic-Job是一个分布式调度解决方案，由Elastic-Job-Lite和Elastic-Job-Cloud两个子项目组成。Elastic-Job-Lite作为轻量级无中心化解决方案，提供以jar包形式的分布式任务协调服务。它适用于那些...