基于Redis 的任务队列Bull -- (五)lua脚本的使用

bull 使用 lua 脚本执行各种任务,ioredis的defineCommand方法将lua脚本定义成redis client的方法

Redis 保证脚本的原子执行。执行脚本时,所有服务器活动在其整个运行期间都会被阻止。

这些语义意味着脚本的所有效果要么尚未发生,要么已经发生。

可以直接通过 client 来调用脚本

client.addJob(keys);
queue.client.moveToActive(keys.concat(args)).then(raw2jobData);
job.queue.client.moveToFinished(args)
queue.client.moveToDelayed(args)

命名

所有的 lua 脚本都放置在 lib/commands 目录下

脚本文件名称格式为{name}-{key count}.lua,name是调用脚本的方法名称,key count是脚本中key的数量

注册

延迟创建 redis client 时,会调用 commands 方法在 client 上注册脚本

注意,只有最常用的 client 需要注册脚本,eclie

基于Redis 的任务队列Bull -- (八)stalled job 所以 stalled 队列中的 job id 只能说是可能 stalled ,而不是说在 stalled 队列里就代表它实际上已经停滞。bull会在每次执行 stalled check 结束时,将 active 队列中的job id分批全量刷入 stalled 队列。moveUnlockedJobsToWait会执行lua脚本,获取失败的job和停滞的job,然后发出对应的 event。bull将丢失锁的 job 称为停滞 job,认为这些 job 因为某些原因导致执行不成功,且还在active状态。 阅读详情

相关推荐

基于Redis 的任务队列Bull -- (十四)completed

当 maxAge 有效时,根据 score 从 zset 中取出大于 maxAge 的 job id,删除 job 数据,然后从 zset 中移除。当 count 有效时,取出 zset 中 score 较低且数量超出的 job id,删除 job 数据,然后从 zset 中移除。如果 N > 1代表大于1分钟,则对 list LPUSH 一个delta,N-1个0,否则 LPUSH 一个 delta。如果 N 大于 0,代表到了计数周期,如果 N 小于 0 就什么也不做,因为计数粒度以分钟计。

afan_coding的博客 120

基于Redis 的任务队列Bull -- (十一)rate limit

如果 job 没有被速率限制且 limited set 中 job 数量不为0,则根据 limited count 计算一个延迟时间戳。添加 job 时,如果 limiter.groupKey 存在,会生成一个包含指定值的 job id。bull在add job时,有一个 rate limit 选项,设置了队列处理job的速率限制。如果 job 已经被速率限制,则意味着它应该被再次处理,即再次执行 maxJobs 判断、如果上面两步计算后得到的 delay 大于0,代表 job 应该被速率限制。

afan_coding的博客 231

基于Redis 的任务队列Bull -- (十三)repeat job

当 add repeat job 时,会调用一次 nextRepeatableJob ,它会创建当前这次要运行的 Job。当 repeat job 结束时,会再次调用 nextRepeatableJob ,它会创建下次要运行的 Job。总的来说,bull repeat job 的执行是链式的,下一次job开始于上一次job的结束。bull在add job时可以设置任务的repeat选项,用于定时重复执行 job。从这里算起,repeat job 和普通的 job 就完全一样了,会执行相同的流程。

afan_coding的博客 226

基于Redis 的任务队列Bull -- (十七)priority / lifo

然后是同时使用 priority 和 lifo 的情况,从1到10,每到5添加一个 lifo 为 true 的 job。当优先级为0时,lifo 为 false 意味着使用 LPUSH,lifo 为 true 意味着使用 RPUSH。这存在一个显而易见的问题,就是 lifo 为 true 的 job 不会放在 priority zset 里。输出如下,可以看到 lifo 为 true 的不是最优先执行的,而且优先级顺序也被打乱。所以 lifo 为 true 的 job 会打乱优先级的排序。

afan_coding的博客 174

基于Redis 的任务队列Bull -- (十六)backoff

bull 在add job 时,有一个 backoff 选项,用于指定当 job 失败时的退避策略。注意,内建策略函数是高级函数,根据 backoff.delay 返回一个闭包函数。计算退避delay值时,首先要查找退避策略函数,然后调用函数返回 delay。具体的说,当 job 失败时会根据策略函数,得到一个 delay 值。它是一个对象,key 代表自定义策略类型,value 代表策略函数。查找策略函数,首先从自定义策略中查找,然后从内建策略中查找。fixed 代表固定延迟退避,每次的延迟值都一样。

afan_coding的博客 196

emir分析RC corner如何选择

power analysis阶段 RC corner的选择

weixin_61954252的博客 3596

今天出一个candence 17.4 allego的安装教程

7、安装完成,接下来进行补丁更新,找到Hotfix_SPB17.40.035_wint.iso软件 ,右击鼠标选择装载。6、因为之前选择的定制安装,这一步不知道具体要安装啥,因此都勾选,点击NECK,接下来等待安装完成。后面经过仔细对比,发现是前面更新补丁时选择了F盘,F盘是candence安装包,不是补丁。8、在破戒大师里选择安装更新补丁,并找到刚才装载的安装包里的程序,点击下一步。3、打开破戒大师,找到安装candence进行如下图选择,点击下一步。有耐心的人可以重新卸了再装一边,我就不卸了,直接装。

hcvinh的博客 2732

别再让PyCharm吃光你的C盘!保姆级教程:安全迁移config、plugins和remote sources到D盘

本文提供了一份详细的PyCharm配置与缓存文件迁移指南,帮助开发者将config、plugins和remote sources等占用大量C盘空间的文件安全转移到D盘。通过修改data.properties文件和正确迁移顺序,确保PyCharm功能不受影响,同时释放宝贵的系统盘空间。

weixin_28836989的博客 424

【项目实战】Qt6 录制屏幕、录制声音生成MP4、AVI、MA3等(完整源码,可直接编译使用)

本文将详细介绍如何利用Qt6多媒体模块中的QMediaCaptureSession、QMediaRecorder、QScreenCapture、QAudioInput、QMediaFormat等功能,实现对屏幕和声音的录制,并生成常见的媒体格式文件,如MP4、AVI、MA3等。我们将探讨如何利用这些功能来实现灵活的视频和音频参数设置,以满足不同需求下的录制和生成要求。我们将重点讨论如何配置视频和音频参数,包括分辨率、帧率、编解码器选择、音频采样率、声道设置等。

yegu001的博客 4941

华为OD-C卷D卷-音乐小说内容重复识别[200分][Python/C++/Java]两种解法实现(并查集+动态规划)

如果不相似,返回不相似的内容。输入:两条语句,给出是否相似,对于相似的语句,返回True和相似的字符对;给出相似对"(****)",""时,"异世邪君(人气玄幻作家)" 和 "异世邪君" 认为是相似,此时相似符号范围 *** 即可。例如,如果"顿号"和"逗号"是相似的,"逗号"和"分号"是相似的,则"顿号"和"逗号"是相似的。初始化:给出两个字符串,一些相似字符对,如顿号和逗号相似,的和de相似,猪和潴,给出两个字符串的相似判断结果。不相似的内容,需要给出不相似的字符串,多处不相似的字符串用空格分隔。

算法算法算法!!! 2001

交换机端口模式详解:Access、Hybrid、Trunk

交换机是网络中至关重要的组件之一,用于连接各种设备并启用数据的高效流动。为了更好地管理和控制网络流量,交换机提供了不同的端口模式,其中包括Access、Hybrid和Trunk。本文将深入探讨这三种端口模式,详细解释它们的配置、特性和应用场景,以帮助网络管理员更好地理解和优化网络架构。

网络技术联盟站 4019

【Android面试八股文】Android Application为什么是单例?

这道题相对简单,就是考察大家是否了解application的创建流程。的实例,它用来存储和处理整个全局变量的一些事情,它同时还是一个。为空的时候,才会创建,从而保证了它是一个单例对象。一样有自己的生命周期,但是它并没有那么复杂,因为。对象的创建过程,找出它为什么是单例的原因。全局进行一些配置,比如配置插件。的时候才会创建,所以说可以在。凭什么是单例,我们查看下。启动的时候都会创建一个。是怎么一步步创建的。是一个单例,即每一个。

字节卷动 534

【学习系列】SAP RAP 1:关于RAP的一些基本介绍

摘要:SAP RAP和CAP是两种不同的开发模型。RAP(RESTful ABAP)用于在S/4HANA等ABAP平台上构建现代业务应用,基于CDS+OData,适合ABAP开发者扩展核心业务。CAP(云应用编程模型)是BTP上的云原生框架,支持Node.js/Java,适合构建跨系统集成应用。RAP优势在于与S/4HANA深度集成,CAP则更灵活,支持多云环境。选择依据主要取决于开发平台(S/4HANA或BTP)、技术栈(ABAP或Node.js/Java)及应用场景(核心扩展或云原生开发)。

DeveloperMrMeng的博客 1173

汉书HE8,好用的汇编代码编写工具

汉书HE8,好用的汇编代码编写工具早期编写汇编代码所用功能强大

visio安装包

Microsoft Office Visio 是一款专业的制图软件。利用经过更新的形状、协作工具和数据链接图表,创建专业级图表以简化复杂的信息。

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

上一篇: 基于Redis 的任务队列Bull -- (四)global/local事件机制
下一篇: 基于Redis 的任务队列Bull -- (六)add job
afan_coding
博客等级 码龄4年 7粉丝 22原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

afan_coding

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值