
任务调度
文章平均质量分 94
任务调度
懒猫gg
我很懒!
展开
-
hadoop yarn调度平台
YARN 是 Hadoop 资源管理器。负责协调任务作业的服务器资源。使任务有序对资源进行利用。除了支持原生 MapReduce任务,他还提供了Spark等任务接入的入口。原创 2022-05-08 22:50:23 · 1159 阅读 · 0 评论 -
任务调度框架quartz
Quartz是OpenSymphony开源组织在Job scheduling领域又一个开源项目,完全由Java开发,可以用来执行定时任务,类似于java.util.Timer。但是相较于Timer, Quartz增加了很多功能。原创 2022-03-13 19:41:46 · 1603 阅读 · 0 评论 -
elastic-job-lite
前言数据分片的目的在于把一个任务分散到不同的机器上运行,既可以解决单机计算能力上限的问题,也能降低部分任务失败对整体系统的影响。elastic-job并不直接提供数据处理的功能,框架只会将分片项分配至各个运行中的作业服务器,开发者需要自行处理分片项与真实数据的对应关系。框架也预置了一些分片策略:平均分配算法策略,作业名哈希值奇偶数算法策略,轮转分片策略。同时也提供了自定义分片策略的接口。调度模型与大部分的作业平台不同,ElasticJob 的调度模型划分为支持线程级别调度的进程内调度 ElasticJ原创 2020-09-21 17:31:19 · 944 阅读 · 1 评论 -
赫拉(hera)分布式任务调度系统
hive脚本调度系统原创 2019-05-22 09:44:52 · 3547 阅读 · 0 评论