多数据源SpringBoot应用集成ElasticJob3.0.4并实现作业事件追踪【最佳实践】

ElasticJob-Lite 3.x 集成springBoot 实战 (一次性作业、定时作业) 阅读详情
AI摘要

本文介绍在多数据源SpringBoot应用中集成ElasticJob3.0.4并实现作业事件追踪的最佳实践。涵盖环境搭建、POM依赖、数据源与追踪配置,还介绍了elasticjob - 3.0.2 - ui的下载、安装、启动及使用,包括作业执行事件追踪,最后总结知识点并给出常见问题解决方案。

一、#创作灵感#

为了在多数据源的SpringBoot应用中实现ElasticJob3.0.4事件追踪各种捣腾,固写下此笔记以巩固知识要点

二、环境

- SpringBoot 2.7.18   官方下载地址:SpringBoot 2.7.18

- ElasticJob 3.0.4   官方下载地址:ElasticJob 3.0.4

- ElasticJob 3.0.4 帮助文档:ElasticJob 3.0.4 帮助文件

- ElasticJob-UI 3.0.2 图形化工具  官方下载地址:ElasticJob-UI 3.0.2

- Nacos 2.2.3   官方下载地址:Nacos 2.2.3

- Oracle JDK8u202(Oracle JDK8最后一个非商业版本)   下载地址:Oracle JDK8u202

三、POM依赖

    <!--  elasticjob依赖  -->
    <dependency>
        <groupId>org.apache.shardingsphere.elasticjob</groupId>
        <artifactId>elasticjob-lite-spring-boot-starter</artifactId>
        <version>3.0.4</version>
    </dependency>

完整POM(信息量较大):

https://download.youkuaiyun.com/download/jjk_02027/90490439

多数据源SpringBoot应用集成ElasticJob3.0.4并实现作业事件追踪【最佳实践】--完整pom文件

四、数据源配置

我的配置放在nacos中的,格式是properties

四个数据源配置如下:

# @author brick man
# clickhouse 时序数据库
spring.datasource.clickhouse.type=com.zaxxer.hikari.HikariDataSource
spring.datasource.clickhouse.driver-class-name=com.clickhouse.jdbc.ClickHouseDriver
spring.datasource.clickhouse.jdbc-url=jdbc:clickhouse://********:8123/real_saas_health_degree
spring.datasource.clickhouse.username=saas_health
spring.datasource.clickhouse.password=******
# 是允许连接在连接池中空闲的数量
spring.datasource.clickhouse.minimum-idle=5
# 是允许连接在连接池中空闲的最长时间(以毫秒为单位)
spring.datasource.clickhouse.idle-timeout=600000
# 配置最大池大小
spring.datasource.clickhouse.maximum-pool-size=20
# 配置从池返回的连接的默认自动提交行为。默认值为true
spring.datasource.clickhouse.auto-commit=true
# 连接池的名称
spring.datasource.clickhouse.pool-name=MyHikariCP
# 池中连接关闭后的最长生命周期(以毫秒为单位)
spring.datasource.clickhouse.max-lifetime=1800000
# 是客户端等待连接池连接的最大毫秒数
spring.datasource.clickhouse.connection-timeout=120000
# 开启连接监测泄露 本地网络耗时大设长一点15s,生产可设5s
spring.datasource.clickhouse.leak-detection-threshold=15000
# 测试连接数据库  
spring.datasource.clickhouse.connection-test-query=select version();

# mysql数据库存AI平台主数据
spring.datasource.mysql-ai.type=com.zaxxer.hikari.HikariDataSource
spring.datasource.mysql-ai.driver-class-name=com.mysql.cj.jdbc.Driver
spring.datasource.mysql-ai.jdbc-url=jdbc:mysql://******:3307/sml
spring.datasource.mysql-ai.username=sml
spring.datasource.mysql-ai.password=******

# pg数据库存业务统计数据
spring.datasource.postgresql-gatherds.type=com.zaxxer.hikari.HikariDataSource
spring.datasource.postgresql-gatherds.driver-class-name=org.postgresql.Driver
spring.datasource.postgresql-gatherds.jdbc-url=jdbc:postgresql://******:18921/lte_hjdb
spring.datasource.postgresql-gatherds.username=crm_qry
spring.datasource.postgresql-gatherds.password=******

# mysql数据库存elasticjob事件追踪数据
spring.datasource.mysql-elasticjob.jdbc-url=jdbc:mysql://******:3307/elasticjob?useUnicode=true&characterEncoding=utf8&zeroDateTimeBehavior=convertToNull&useSSL=true&serverTimezone=GMT%2B8
spring.datasource.mysql-elasticjob.driver-class-name=com.mysql.cj.jdbc.Driver
spring.datasource.mysql-elasticjob.username=elasticjob
spring.datasource.mysql-elasticjob.password=******

五、ElasticJob追踪配置

# author brick man
# 持久化类型 RDB: relation database -- 关系型数据库
elasticjob.tracing.type=RDB
# 数据源配置前缀,作者这里集成时不知何故未生效,最终通过把MySQL-elasticjob数据源设置为主数据源(@Primary)才集成成功
elasticjob.tracing.data-source=spring.datasource.clickhouse

到这里所有集成工作就已经完成

特别注意:

1、新版本的elasticjob集成时不需要创建作业配置类(老版本需要)

2、作者这里可能因为springboot版本的差异把elasticjob数据源设置为主数据源才成功(希望读者用的springboot3的最新版本,这样会比我幸运)

3、elasticjob的配置可借助intelJ等IDE的配置联想功能查看有哪些配置(官方配置文档这个配置不太好找、配置说明也不一定完备)

六、指定主数据源(非必须)

上面的步骤如果已经集成成功可跳过这一步

条件:ElasticJob使用了上面指定的数据源配置且应用启动不报错(可跳过这一步)

通过@Primary 注解将数据源标记为主数据源

1、数据源配置类

import com.******.nctc.common.configuration.MySQLElasticJobDataSource;
import com.baomidou.mybatisplus.annotation.DbType;
import com.baomidou.mybatisplus.core.MybatisConfiguration;
import com.baomidou.mybatisplus.core.config.GlobalConfig;
import com.baomidou.mybatisplus.core.injector.DefaultSqlInjector;
import com.baomidou.mybatisplus.extension.plugins.MybatisPlusInterceptor;
import com.baomidou.mybatisplus.extension.plugins.inner.PaginationInnerInterceptor;
import com.baomidou.mybatisplus.extension.spring.MybatisSqlSessionFactoryBean;
import org.apache.ibatis.plugin.Interceptor;
import org.apache.ibatis.session.SqlSessionFactory;
import org.mybatis.spring.SqlSessionTemplate;
import org.mybatis.spring.annotation.MapperScan;
import org.springframework.beans.factory.annotation.Qualifier;
import org.springframework.boot.context.properties.ConfigurationProperties;
import org.springframework.boot.jdbc.DataSourceBuilder;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
import org.springframework.context.annotation.Primary;
import org.springframework.core.io.Resource;
import org.springframework.core.io.support.PathMatchingResourcePatternResolver;

import javax.sql.DataSource;

/**
 * @Description: MySQL 数据源配置类
 * @Author: brick man
 * @CreateDate: 2024/12/31
 * @Version: 1.0
 */
@Configuration
@MapperScan(basePackages = "com.******.nctc.elasticjob.mapper",
        annotationClass = MySQLElasticJobDataSource.class,
        sqlSessionFactoryRef = "mysqlElasticJobSessionFactory")
public class MySQLElasticJobDataSourceConfig {

    @Bean(name = "mysqlElasticJobDataSource")
    @Primary // 将该数据源标记为主数据源
    @ConfigurationProperties("spring.datasource.mysql-elasticjob")
    public DataSource mysqlElasticJobDataSource() {
        return DataSourceBuilder.create().build();
    }

    @Bean(name = "mysqlElasticJobSessionFactory")
    public SqlSessionFactory mysqlElasticJobSqlSessionFactory(@Qualifier("mysqlElasticJobDataSource") DataSource dataSource) throws Exception {
        MybatisSqlSessionFactoryBean sqlSessionFactoryBean = new MybatisSqlSessionFactoryBean();
        sqlSessionFactoryBean.setDataSource(dataSource);
        GlobalConfig globalConfig = new GlobalConfig();
        globalConfig.setSqlInjector(new DefaultSqlInjector());
        sqlSessionFactoryBean.setGlobalConfig(globalConfig);
        MybatisPlusInterceptor interceptor = new MybatisPlusInterceptor();
        interceptor.addInnerInterceptor(new PaginationInnerInterceptor(DbType.MYSQL));
        Interceptor[] plugins = {interceptor};
        sqlSessionFactoryBean.setPlugins(plugins);
        PathMatchingResourcePatternResolver resolver = new PathMatchingResourcePatternResolver();
        Resource[] resources = resolver.getResources("classpath:mapper/elasticjob/*.xml");
        sqlSessionFactoryBean.setMapperLocations(resources);
        MybatisConfiguration configuration = new MybatisConfiguration();
        configuration.setMapUnderscoreToCamelCase(true);
        configuration.setCallSettersOnNulls(true);

        sqlSessionFactoryBean.setConfiguration(configuration);
        return sqlSessionFactoryBean.getObject();
    }

    @Bean("mysqlElasticJobSqlSessionTemplate")
    public SqlSessionTemplate sqlSessionTemplate(@Qualifier("mysqlElasticJobSessionFactory") SqlSessionFactory sessionFactory) {
        return new SqlSessionTemplate(sessionFactory);
    }
}

2、数据源注解类

import java.lang.annotation.*;

/**
 * @Target({ElementType.TYPE})  表示该注解只在类上生效
 * @Retention(RetentionPolicy.RUNTIME)  表示该注解在运行时有效
 * @Documented 该注解会被包含在 Javadoc 中产生的文档中
 * @author brick man
 * @date 20241231
 */
@Target({ElementType.TYPE})
@Retention(RetentionPolicy.RUNTIME)
@Documented
public @interface MySQLElasticJobDataSource {
}

注意

     作者这里调整了原来的主数据源,为了避免工程现在功能出现问题,需要对所有mapper指定数据源

七、elasticjob-3.0.2-ui

1、下载elasticjob-3.0.2-ui

下载:见前面第二节 环境 的下载连接

2、安装elasticjob-3.0.2-ui

选择适合自己的版本后解压--->修改数据,启动即可(需要jdk8+)

作者用的:elasticjob-3.0.2-lite-ui-bin.tar.gz

-(1) 数据库驱动放ext-lib目录

解压后需要将对应数据库驱动放ext-lib目录

作者这里用的mysql存储,所以把mysql驱动包放ext-lib目录

-(2)修改配置

作者的配置示例:

server.port=8089

# web 控制台张米
auth.username=root
auth.password=******
auth.token_expires_after_seconds=3600

spring.datasource.default.driver-class-name=com.mysql.cj.jdbc.Driver
spring.datasource.default.url=jdbc:mysql://localhost:3306/elasticjob?useUnicode=true&characterEncoding=utf8&zeroDateTimeBehavior=convertToNull&useSSL=true&serverTimezone=GMT%2B8
# 数据库张米
spring.datasource.default.username=elasticjob
spring.datasource.default.password=******

spring.jpa.show-sql=false

## Uncomment the following property to allow adding DataSource dynamically.
dynamic.datasource.allowed-driver-classes={'org.h2.Driver','org.postgresql.Driver','com.mysql.cj.jdbc.Driver'}

-(3) start.sh脚本JVM参数调整

-  -Xss参数调整为512k,默认太小,一般启动会报错

-(4) start.sh脚本指定jdk环境变量

- 如果机器上有jdk8+环境变量可跳过

- jdk17会报错因为starts.h脚本中个别jvm参数只有8支持

- 解决覆盖PATH环境变量JDK8环境变量不生效的问题(还是JDK17),如果机器的环境变量是17且采用的是程序全量安装的方式安装(桌面、程序组都有),可参考作者下面的的方式(把java命令替换成jdk8的java脚本的绝对路径)解决

作者修改后的脚本如下:

SERVER_NAME=ShardingSphere-ElasticJob-UI

# 指定JAVA_HOME
export JAVA_HOME=/usr/java/jdk1.8.0_202-amd64
export PATH=/bin:/usr/sbin:/sbin:/usr/local/sbin::$HOME/.local/bin:$JAVA_HOME/bin:/usr/bin
export JAVA_HOME
# 作者上面修改了环境变量(大部分情况下能生效),但服务器上下面这句输出的依然是open jdk17
# 故作者在后面执行java时使用了jdk8的绝对路径
echo `/usr/java/jdk1.8.0_202-amd64/bin/java -version`


cd `dirname $0`
cd ..
DEPLOY_DIR=`pwd`

LOGS_DIR=${DEPLOY_DIR}/logs
if [ ! -d ${LOGS_DIR} ]; then
    mkdir ${LOGS_DIR}
fi

STDOUT_FILE=${LOGS_DIR}/stdout.log

PIDS=`ps -ef | grep java | grep "$DEPLOY_DIR" | grep -v grep | awk '{print $2}'`
if [ -n "$PIDS" ]; then
    echo "ERROR: The $SERVER_NAME already started!"
    echo "PID: $PIDS"
    exit 1
fi

CLASS_PATH=.:${DEPLOY_DIR}/conf:${DEPLOY_DIR}/lib/*:${DEPLOY_DIR}/ext-lib/*
JAVA_OPTS=" -server -Xmx1g -Xms1g -Xmn512m -Xss512k -XX:+DisableExplicitGC -XX:+UseConcMarkSweepGC -XX:+CMSParallelRemarkEnabled -XX:LargePageSizeInBytes=128m -XX:+UseFastAccessorMethods -XX:+UseCMSInitiatingOccupancyOnly -XX:CMSInitiatingOccupancyFraction=70 "

MAIN_CLASS=org.apache.shardingsphere.elasticjob.lite.ui.Bootstrap
echo "Starting the $SERVER_NAME ..."

#  使用了jdk8的绝对路径解决环境变量问题
nohup /usr/java/jdk1.8.0_202-amd64/bin/java ${JAVA_OPTS} -classpath ${CLASS_PATH} ${MAIN_CLASS} > ${STDOUT_FILE} 2>&1 &
sleep 1
echo "Please check the STDOUT file: $STDOUT_FILE"

3、启动elasticjob-3.0.2-ui

${ElasticjobUI_HOME}/bin/start.sh

4、登陆elasticjob-3.0.2-ui

5、添加注册中心配置

6、查看所有作业

7、作业执行事件追踪

- 历史轨迹

可查看每个作业每次执行的起止时间(从而可计算出耗时)

- 查询耗时超过1分钟的Job名及次数

通过该类查询看是否有耗时超过预期的作业,从而针对性的分析优化

-- 查询耗时超过1分钟的Job名及次数
select job_name,count(0) 
  from JOB_EXECUTION_LOG 
 where complete_time-start_time>60
 group by job_name

八、知识点总结

1、elasticjob数据源的指定(不指定默认使用主数据源)

2、elasticjob不同的版本使用各不相同(一般较新版本使用会更简单,配置更少)

3、elasticjob的配置可借助intelJ等IDE的配置联想功能查看有哪些配置(官方配置文档并不发找、配置说明也不一定完备)

4、java环境变量问题可通过shell脚本中java命令用jdk8的绝对路径代替

九、其他相关重要知识点

1、任务分继承SimpleJob类的任务、继承DataflowJob的任务

2、elasticjob任务分片后同一个实例上运行的多个分片默认是不支持的

3、如果想elasticjob在同一个实例上运行的多个分片任务(实例数量小于分片数量)可以通过其他方式实现(实现方案可查看作者2025年2月12月发布的文章--- 即下面推荐的文章)

十、常见问题

Q1: 定时任务(一段时间后,如3个月)日志(RDB)数据过大导致日志数据写入慢的问题

该问题可能导致数据库连接池耗尽,最终导致任务执行失败

解决:通过MySQL的Event能力。

-- 通过mysql的事件能力 设置elasticjob定时任务执行日志数据的保存时间
-- MySQL:使用 EVENT 来定期清理旧数据:
-- start_time>=STR_TO_DATE('2025-02-12 22:17:00', '%Y-%m-%d %H-%i-%s')
-- EVENT1 
CREATE EVENT delete_old_execution_log
ON SCHEDULE EVERY 1 DAY
DO DELETE FROM JOB_EXECUTION_LOG WHERE start_time < DATE_SUB(NOW(), INTERVAL 30 DAY);

-- EVENT2
CREATE EVENT delete_old_trace_log
ON SCHEDULE EVERY 1 DAY
DO DELETE FROM JOB_STATUS_TRACE_LOG WHERE creation_time < DATE_SUB(NOW(), INTERVAL 30 DAY);

-- 语句验证
select * FROM JOB_EXECUTION_LOG WHERE start_time < DATE_SUB(NOW(), INTERVAL 30 DAY);
select * FROM JOB_STATUS_TRACE_LOG WHERE creation_time < DATE_SUB(NOW(), INTERVAL 30 DAY);

PostgreSQL:使用 cron 风格的作业调度器:

CREATE SCHEDULE delete_old_logs AS '0 1 * * *' ON SCHEDULE FOR '1 day' DO $$ DELETE FROM job_logs WHERE log_date < NOW() - INTERVAL '30 days'; $$;

 

相关文章推荐:

Elasticjob在同一个实例上运行的多个分片任务-优快云博客

ElasticJob‐Lite:整合Spring Boot ElasticJob‐Lite的Spring Boot Starter集成了TracingConfiguration自动配置,开发者只需注册一个DataSource到Spring容器中,并在配置文件指定事件追踪数据源类型,Starter就会自动创建一个TracingConfiguration实例并注册到Spring容器中。 pom.xml: <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache. 阅读详情

相关推荐

分布式任务定时框架elasticjob详解

序言 如果你需要管理job,可以考虑使用elasticjob。 如果你想动态添加job ,也可以考虑使用elasticjob。 如果对系统可靠性,稳定性和服务器弹性等要求比较高,还可以考虑elasticjob。 Elastic-Job是当当网基于Zookepper,Quartz开发并且开源的Java分布式定时任务,解决Quartz不支持分布式的弊端。它由两个相 互独立的子项目Elasti...

几十年资深高级架构师,技术专家的技术笔记。专注C、Java、Python、微服务、云原生、AI工程化及高并发系统分布式架构实战,分享源码剖析、性能调优与架构治理经验。 5327

[SpringBoot 分布式调度elasticjob 整合 ]

今日良宴会 今日良宴会,欢乐难具陈21。 弹筝奋逸响,新声妙入神22。 令德唱高言,识曲听其真23。 齐心同所愿,含意俱未申24。 人生寄一世,奄忽若飙尘25。 何不策高足,先据要路津26。 无为守穷贱,轗轲长苦辛27。

汤圆的博客 2297

Springboot + Elasticjob-lite 3.x + Elasticjob-lite-UI可视化

elasticjob

zhangdm的博客 2036

ElasticJob+Spring Boot简单使用

ElasticJob+Spring Boot简单使用 1、部署zookeeper集群 使用docker快速部署 zookeeper.yml version: '3.1' services: zoo1: image: zookeeper restart: always hostname: zoo1 container_name: zoo1 ports: - 2181:2181 environment: ZOO_MY_ID: 1

owen 4627

SpringBoot 整合 ElasticJob

ElasticJob 是当当网开源的一个分布式调度解决方案,由两个相互独立的子项目 Elastic-Job-Lite 和 Elastic-Job-Cloud 组成。 Elastic-Job-Lite 定位为轻量级无中心化解决方案,使用jar包的形式提供分布式任务的协调服务; Elastic-Job-Cloud 采用自研 Mesos Framework 的解决方案,额外提供资源治理、应用分发以及进程隔离等功能。

死牛胖子的技术随笔 337

从ST电机库到TI InstaSPIN:手把手对比两种主流FOC实现中的坐标变换差异

本文深入对比了ST电机库与TI InstaSPIN在FOC实现中的坐标变换差异,包括坐标系定义、变换系数和角度处理等关键点。针对BLDC和PMSM电机控制,提供了从理论到实践的移植方案,帮助工程师快速解决平台切换中的性能问题。特别解析了Clarke/Park变换在两种实现中的微妙差异及其对PI控制的影响。

weixin_28724661的博客 398

ElasticJob分布式任务调度与SpringBoot集成实战

分布式任务调度是现代微服务架构中的关键技术,通过将任务分解并分配到多个节点执行,显著提升系统吞吐量和可靠性。ElasticJob作为当当网开源的分布式调度中间件,基于ZooKeeper实现去中心化协调,提供智能分片、失效转移等核心能力。相比传统Quartz方案,它能自动处理节点动态扩容、任务均衡分配等复杂场景,特别适合电商秒杀、库存同步等高并发业务。通过与SpringBoot的深度集成,开发者可以快速实现定时任务的分片处理、监控告警等功能。典型应用场景包括订单超时处理、日志分析等需要水平扩展的批处理作业,实

weixin_33937913的博客 423

在VSCode中使用LaTex+(grammarly语法检测,chatgpt翻译,Sumatra PDF 轻量级pdf阅读器)

整个文章分为以下几个内容,打 * 的是必须要安装的。

u011895157的博客 2万+

SpringBoot定时任务 - 什么是ElasticJob?如何集成ElasticJob实现分布式任务调度?

使用 ElasticJob 能够让开发工程师不再担心任务的线性吞吐量提升等非功能需求,使他们能够更加专注于面向业务编码设计; 同时,它也能够解放运维工程师,使他们不必再担心任务的可用性和相关管理需求,只通过轻松的增加服务节点即可达到自动化运维的目的。ElasticJob-Lite: 定位为轻量级无中心化解决方案,使用 jar 的形式提供分布式任务的协调服务。Elasticjob-lite的案例- SpringBoot集成定时任务 - 分布式Elasticjob-lite方式ElasticJob-Cloud:

pdai的博客 579

基于verilog的16QAM调制

思路1:正交调幅法——实现16QAM调制,可以理解为时相位相差90度的两个正弦波的4PAM叠加。 4比特输入经过2->4进制转化得到两路2比特输入,然后分别经过4PAM后叠加所得输出即为16QAM调制结果。 具体程序稍后编写。 思路2:复合相移法——可以借助前面编写的QPSK,相当于两路幅度不同的QPSK的叠加,比如幅度分别取1和3 。 思路1正交调幅法的设计方案: 两正弦波相位差...

weixin_30725467的博客 2929

【无标题】STM32F767串口空闲中断+DMA实现不定帧长度的接收

提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录前言一、配置串口与DMA二、空闲中断服务函数二.串口+DMA发送三、主函数总结 前言 提示:这里可以添加本文要记录的大概内容: 使用STM32F767实现串口空闲中断+DMA传输接收不定帧长度数据,以及当中可能遇到的错误总结 提示:以下是本篇文章正文内容,下面案例可供参考 一、配置串口与DMA //硬件模块配置可直接通过CUBEMX配置 void MX_USART1_UART_Init(void) { huart1.In.

qq_42589531的博客 1169

ElasticJob与SpringBoot终极集成指南:10分钟快速配置与最佳实践

ElasticJob作为一款强大的分布式定时任务调度框架,与SpringBoot的无缝集成让开发者能够快速构建可靠的分布式任务系统。本文将为您详细介绍ElasticJob在SpringBoot环境中的完整配置流程、核心概念解析以及实际应用中的最佳实践。🚀 ## 什么是ElasticJob? ElasticJob是一个分布式调度解决方案,提供分布式任务分片、弹性扩容、故障转移等关键功能。通过S

gitblog_00762的博客 1042

【2026年华为暑期实习(非AI方向(通软&嵌软&测试&算法&数据科学))-4月8日-第一题- 包裹的编码】(题目+思路+Java&C++&Python解析+在线测试)

摘要:该问题要求将给定的十进制整数N转换为混合进制编码字符串,并处理回文检测。首先根据N的符号位确定编码首位(0或1),然后按输入的进制序列依次对N的绝对值进行取余和整除操作,得到编码数组。将数组元素转换为字母后生成字符串,若字符串为回文则添加"(palindrome)"后缀;否则输出最长回文子串(字典序最小)。算法采用中心扩展法检测回文,时间复杂度为O(L²),空间复杂度为O(L),其中L为字符串长度。

m0_73659489的博客 130

ShardingSphere-ElasticJob踩的坑 截至3.0.1版本

ElasticJob EasticJob原先是属于当当的,在2017 年的时候已经停止了维护,最近在2021年,又重新开启了维护,这篇文章主要是写重启维护后,所带来的一些更改,以及所采的一些坑。 1.官网地址 https://shardingsphere.apache.org/elasticjob/current/cn/overview/ https://github.com/apache/shardingsphere-elasticjob 2.新版elastic-job平台的部署方法 安装目录是/usr/

qq_23657821的博客 5650

1篇1章4节:生成对抗网络GAN和图像生成领域的StyleGAN

AI图像生成技术的革命性突破:从GAN到StyleGAN 近年来,人工智能在图像生成领域取得显著进展,尤其是生成对抗网络(GAN)的发展推动了技术的飞跃。从早期的基础GAN到渐进式GAN(Progressive GAN),再到革命性的StyleGAN,AI生成图像的逼真度已接近人类创作水平。StyleGAN通过引入风格潜向量和自适应实例归一化,实现了对图像风格与内容的精细控制,广泛应用于人脸生成、艺术创作及影视行业。后续的StyleGAN2解决了“斑点”问题,StyleGAN3进一步优化纹理过渡,提升了图像

MD Code 222

Error: Flash Download failed - Target DLL has been cancelled

由于换了新电脑,keil重装了下,然而之前的MCU的支持包没有安装,以及一些其他的问题,导致可以编译但是不能将程序烧录到单片机中。现整理一下解决思路: 1、将支持包下载并添加: 找到你需要用的MCU的具体型号: 例如: 点击网址,下载安装包,或者在csdn等其他网址下载安装包,将下载好的pack包放到keil5的安装目录下的.Download中: 点击file中的import,将路径选择到.........

hanhan的博客 5万+

springboot整合elasticJob实战(纯代码开发三种任务类型用法)以及分片系统,事件追踪详解...

一 springboot整合 介绍就不多说了,只有这个框架是当当网开源的,支持分布式调度,分布式系统中非常合适(两个服务同时跑不会重复,并且可灵活配置分开分批处理数据,贼方便)! 这里主要还是用到zookeeper,如果没有zk环境,可以百度或者参考我之前的博客搭建 添加依赖,这里有一点,如果是在springcloud中的话,需要排除自带的curator依赖,因为cloud已经集成一些,会冲...

weixin_33766805的博客 595

电磁场仿真软件:COMSOL Multiphysics_(17).时域与频域分析

时域和频域分析是电磁场仿真中非常重要的两种方法,每种方法都有其独特的应用场景和优势。时域分析适用于瞬态响应和宽带信号的分析,而频域分析则适用于稳态响应和窄带信号的分析。在COMSOL Multiphysics中,通过合理设置物理场接口、材料属性、边界条件、网格划分和求解器,可以高效地进行这两种分析,并通过傅里叶变换将时域结果转换为频域结果,进一步拓展仿真应用的范围。合理的性能优化措施,如网格划分优化和并行计算,可以显著提高仿真的效率和准确性。

kkchenjj的博客 1979

ElasticJob 3.0.2 发布|优化 Failover、调度稳定性,支持 Java 19

ElasticJob 3.0.2 对故障转移特性、作业调度稳定性、作业 API、Java 19 兼容性等方面进行了完善。

wu_weijie的博客 748

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

ElasticJob在SpringBoot中的分布式任务调度实践

分布式任务调度是现代微服务架构中的关键技术,通过将任务分配到多个节点执行,实现负载均衡和高可用。ElasticJob作为当当网开源的分布式调度中间件,基于Zookeeper/Nacos实现任务分片和节点发现,具有自动扩容、故障转移等核心能力。在SpringBoot集成场景中,ElasticJob通过starter简化配置,提供动态分片调整、任务事件追踪等高级特性。相比传统方案如Quartz,其在容器化环境表现优异,特别适合电商促销、金融对账等高并发场景。本文通过性能测试数据展示,ElasticJob在响应延

weixin_34228387的博客 329

VB摄像头监控

该VB模块可对摄像头捕获的画面进行录像等,可在创建的窗口进行控制

ElasticJob分布式任务调度在SpringBoot中的实践与优化

分布式任务调度是微服务架构中的关键技术,通过将任务分配到多个节点执行来提高系统吞吐量和可靠性。ElasticJob作为基于ZooKeeper的分布式调度框架,通过分片路由和失效转移机制解决了传统方案的单点故障和重复执行问题。在电商大促、金融对账等高并发场景下,ElasticJob能够实现动态扩容和任务幂等处理,确保海量数据的高效处理。本文以SpringBoot集成实战为例,详细讲解如何通过分片策略优化、线程池配置等手段提升任务调度性能,并分享生产环境中常见的分片不均、ZK连接超时等问题的解决方案。

weixin_33716941的博客 318

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

Elastic-job系列(三)-------- 控制台作业事件追踪TODO

一、简介 esjob提供了任务事件追踪功能,通过做数据源配置,监听事件,会在任务执行的时候在指定的数据源创建俩张表,job_execution_log, 和job_status_trace_log。然后通过配置事件追踪数据源配置,就可以在作业历史中查看作业的执行记录了。 此处使用的是上篇配置的一个simple类型的任务。 二、 整合过程 2.1 pom.xml ...

请叫我猿叔叔的博客 5450

分布式任务调度方案shardingsphere-elasticjob

shardingsphere-elasticjob-lite 本项目主要是springboot整合了elasticjob 1.zookeeper注册配置注入 2.作业追踪配置注入 3.封装了shardingsphere-elasticjob相关API 4.nutz框架对对象的简单dao操作 项目链接:https://gitee.com/hints0816/shardingsphere-elasticjob 介绍 ElasticJob原来是当当网的分布式任务调度方案,从上年开始被Apache收购为子项目

hints'blog 1405

SpringBoot定时任务 - 分布式elastic-job方式

ElasticJob 是面向互联网生态和海量任务的分布式调度解决方案,由两个相互独立的子项目 ElasticJob-Lite 和 ElasticJob-Cloud 组成。它通过弹性调度、资源管控、以及作业治理的功能,打造一个适用于互联网场景的分布式调度解决方案,并通过开放的架构设计,提供多元化的作业生态。它的各个产品使用统一的作业 API,开发者仅需一次开发,即可随意部署。ElasticJob 已于 2020 年 5 月 28 日成为 Apache ShardingSphere 的子项目。

埃泽漫笔 1140

python分布式任务调度开源_Elastic-job分布式任务调度框架

作业配置3.1.zookeeper配置新建RegistryCenterConfig类@Configuration@ConditionalOnExpression("'${regCenter.serverList}'.length() > 0")public class RegistryCenterConfig {private final Logger log = LoggerFactory...

weixin_39597323的博客 316
上一篇: Druid数据源指标监控
下一篇: Zookeeper模式安装Kafka(含常规、容器两种安装方式)
飞火流星02027
博客等级 码龄19年 783粉丝 121原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

飞火流星02027

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值