【异常】记一下因分布式定时任务框架XXL-JOB中Cron表达式写错导致的OOM问题

本本本添哥

已于 2024-03-20 23:34:28 修改

阅读量1.4k

点赞数

CC 4.0 BY-SA版权

于 2023-01-06 17:51:30 首次发布

本文链接：https://blog.youkuaiyun.com/wstever/article/details/128575904

002 - 进阶开发能力同时被 2 个专栏收录

256 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

005 - 中间件

75 篇文章 ¥9.90 ¥99.00

订阅专栏

超级会员免费看

本文记录了一次由于XXL-JOB的Cron表达式配置错误，导致服务频繁重启并出现OOM问题的排查过程。通过查看ELK日志和K8s服务器日志，定位到问题根源是定时任务每秒执行一次，大量占用内存。最终通过调整配置为每日执行一次解决了问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、异常现象

前端提示502 Bad Gateway
502 Bad Gateway是指错误网关，无效网关；
在这里插入图片描述

二、初步问题排查

遇事不慌，ELK上。

2.1查看ELK中的错误日志

Error parsing HTTP request header
 Note: further occurrences of HTTP request parsing errors will be logged at DEBUG

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

本本本添哥

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
打赏
打赏
打赏举报

举报

专栏目录

订阅专栏

【异常】定时任务框架XXL-JOB因错误配置Cron表达式提示Cron非法+java.text.ParseException: Unexpected end of expression.

本本本添哥

12-07

1587

【代码】【异常】定时任务框架XXL-JOB因错误配置Cron表达式提示Cron非法+java.text.ParseException: Unexpected end of expression.

SpringBoot集成XXL-Job启动报非法反射WARNING: An illegal reflective access operation has occurred

hkl_Forever的博客

11-27

807

1、排除 xxl-job 中的 groovy 重新引入即可。xxl-job-core版本：2.3.1。1、是 groovy 依赖的版本导致。

参与评论您还未登录，请先登录后发表或查看评论

xxl-job导致容器OOM

bobo哥写字的地方

01-10

2794

部署在容器中的一些Java程序每个月都会有1次由于超过容器的限制内存大小，被cgroup杀掉。究竟是什么原因呢？

xxljob中执行器配置错误导致的NioEventLoopGroup未被正确回收的oom分析和解决

huang007guo的专栏

11-15

5111

xxljob中执行器配置错误导致的NioEventLoopGroup未被正确回收的oom分析和解决一. mat内存分析报告中NioEventLoop占用了1.2g的容量,大部分的堆空间定位NioEventLoop正确的被引用位置应该为下图所示 NioEventLoopGroup正确的被引用位置为下图所示但发现大量的NioEventLoopGroup没有被正确引用,却也没有回收掉故初步定位为:NettyHttpConnectClient 下的grou...

xxljob——记录一个cron配置失效问题以及解决方式

专注写bug

10-25

569

本次记录一个按照规范配置corn表达式，但表达式运行时间错乱的问题。以及最终解决的方式。

xxljob 内存溢出

qq_20519453的博客

06-16

2028

原来是执行器终止的时候，会批量获取回调队列里的回调入参集合，如果回调入参集合不为空就会记录当前任务执行日志并生成日志文件。如果发生异常则会将回调入参集合序列号为byte[]，然后在日志根目录下创建callbacklog目录，生成回调失败记录文件xxl-job-callback-{x}.log，将byte[]写入回调失败日志中进行保存。所以问题就是，执行任务出现异常时将回调入参集合转为byte[]保存到回调日志中，后面再拿到回调日志转回byte[]的时候报错了。记一次 xxljob内存溢出排查。

定时任务-xxl-job

weixin_45703155的博客

08-05

1331

定时任务可以定时执行的原理是通过操作系统提供的定时器实现的。Cron表达式可以定时执行底层也是基于操作系统的定时器的机制。在常见的计算机操作系统中，都提供了一种定时器机制，可以设置定时器来触发某个操作或执行某个任务。在我们在系统中设置了一个Cron任务后，Cron服务会工具Cron表达式计算出任务下一次应该执行的时间点，并将这个时间点与当前时间点进行比较，如果当前时间点已经超过了任务的执行时间点，那么Cron服务会立即执行该任务；否则Cron服务会将任务的执行时间点记录下来，并在这个时间点到来时再执行任务。

后端领域Cron表达式的使用技巧大揭秘

最新发布

架构师的AI之路，分享AI应用开发架构的学习与实践。

07-01

842

本文面向需要在后端系统中实现定时任务的开发者（包括Java、Python、Go等语言方向），重点讲解Cron表达式的语法规则、常见误区和高级用法。无论是用Spring的@Scheduled注解，还是Quartz、XXL-Job等框架，掌握Cron表达式都是基础中的基础。本文从生活案例引入Cron表达式的核心概念，逐步拆解7大时间字段的含义，用代码示例演示如何在Spring Boot中使用，最后总结常见坑点和高级技巧。7大字段：秒、分、时、日、月、周、年（年可选）；符号魔法（所有值）、（步长）、?

Java面试题

chaogewudi34的博客

08-06

672

Java面试题-Redis、MySQL、Spring、分布式、多线程、锁等

Spring面试题2

winks3的博客

02-21

416

IOC其实就是控制反转，依赖注入（DI）是SpringIOC的一种实现方式IOC（Inversion of Control）：IOC指将对象的创建和管理权交给Spring容器（如）统一控制。传统开发中，对象通过new主动创建依赖，而IoC模式下，容器负责对象的生命周期和依赖关系DI（Dependency Injection）：是IoC的具体实现方式，指容器在运行时动态将依赖对象注入到目标组件中依赖注入的两种实现方式。

记一次线上环境节点OOM异常，直接导致节点宕机问题（及排查问题流程）

第二颗大白菜

12-06

1370

一、一个阳光明媚的早晨，运维兄弟发了条消息给我，说昨晚线上“xx服务”挂了。二、冷静分析：服务是集群环境的，单节点宕机，并不影响应用可用；三、进入分析阶段： 1.拉取线上节点宕机 GC快照； 2.通过jdk自带工具浏览GC内存占用情况（通过下述图片分析，由jdbc占用大量内存，导致内存溢出，右下图看出，直接占用上GB内存） 3.走查代码，了解项目中存在使用原生jdbc业务场景，通过和其他初级开发人员沟通，找到存在一个每月1号执行的定时任务：每个月1号建立一张分表，该分表的建立方案是，通过

XXL-JOB执行器注册成功但是在管理界面里不显示

05-31

8255

场景描述：在配置正确，调度中心和执行器启动成功的情况下，在管理界面

[Netty源码] NioEventLoop相关问题 (四)

959

03-30

480

[Netty源码] NioEventLoop相关问题 (四), NioEventLoop的创建, 启动, 运行逻辑, 以及空轮询bug的解决方法, 如何异步串行无锁化等问题的解决方法

一文让你用上Xxl-Job 顺带了解cron表达式

(⊙o⊙)？

06-14

3973

XXL - JOB 是一个轻量级分布式任务调度平台，其核心设计目标是开发迅速、学习简单、轻量级、易扩展。现已开放源代码并接入多家公司线上产品线，开箱即用。目前已有多家公司接入xxl - job，包括比较知名的大众点评，京东，优信二手车，北京尚德，360金融(360) ，联想集团(联想) ，易信(网易) 等;

生产环境服务OOM问题解决

a904198604的博客

02-19

913

生产环境服务OOM问题解决起因：项目是由外包商为主自主开发为辅的一个项目，在定时任务这个服务中，自主开发定时任务仅有3个，后续关闭一个后，仅剩2个任务为我们自主开发的内容，而该服务自2021年1月15日后就反复出现OOM服务异常挂掉的问题，本文章仅做记录与学习内容。一、相关数据 定时任务服务-executor（后续简称exe服务），通过XXL-JOB的日常跟踪可以得知该服务集群每日处理定时任务约为2W。 jvm 参数如下： java -javaagent:/opt/agent/skywalking

记一次xxl-job配置的cron表达式没有触发定时任务

qq_34412985的博客

11-13

7743

记一次xxl-job定时任务没有触发的问题，公司选用的是最简单的xxl-job的remote http bean模式,cron表达式写错了，0 0/5 * * * ? 表达式后面有空格，将表达式修改正确后必须将任务停止后再重新启动否则任务不会生效。至于下面的时区我暂时没有遇到，因为之前的定时任务都可以正常使用。当初选了xxl-job就是因为它的触发机制比较靠谱，到点准时发，而且有日志可以看。昨天突然发现部署在一台本地机器上的xxl-job到点并没有触发，且没有任何日志。通过管理页面查询触发.

XXL-JOB及Cron表达式

qq_56650001的博客

11-22

2888

源代码位置：/xxl-job/xxl-job-executor-samples/xxl-job-executor-sample-springboot/src/main/java/com/xxl/job/executor/core/config/XxlJobConfig.java。xxl_job_info：调度扩展信息表，用于保存XXL-JOB调度任务的扩展信息，如任务分组、任务名、机器地址、执行器、执行入参和报警邮件等等；‌周：1-7之间的整数或SUN-SAT，1表示星期天，2表示星期一。

Java常见内存溢出(OOM)解决方案

Healist的博客

04-24

785

讲解的很好的一篇文章，mark下了。Java常见内存溢出(OOM)解决方案

解决：Invalid character found in method name. HTTP method names must be tokens

雅俗共赏的博客

09-30

5403

http请求自动升级