不待见的博客

文章目录一、简介二、产生背景三、架构四、部署模式五、与Oozie的对比六、若任务挂了怎么办？一、简介Azkaban 是一个任务调度器，用于 运行Hadoop作业的 批处理工作流 的 作业调度。二、产生背景大数据的计算、分析和处理，一般都是由多个任务单元组成的，且多个任务单元之间存在强依赖关系。上游任务成功执行完毕，下游任务 拿到上游的结果后 才能开始执行。为了保证处理结果的有效性和精确性，就必须让任务严格按照上下游关系有序的、顺序的执行。最简单的解决方式是：事先预估好每个模块执行所需要的时间，