xiaohu21的博客

Azkaban （2.5.0）使用指南1. 背景在企业开发中，经常会使用脚本进行定时任务执行的工作。这种工作属于重复性劳动，所以简单的脚本定时执行，使用linux的crontab即可不过当遇到脚本任务之间有先后依赖，甚至有出错重试策略时，crontab就不够用了，这时候脚本任务调度管理框架就闪亮登场，azkaban，oozie等都是如此本文主要讲解azkaban的实际使用案例2. 使用azkaban使用时，需要配置一个job文件，文件中设置job类型以及job执行的脚本或者任务。如果执行

Azkaban 简介和2.5.0版本安装教程1. 背景下述是大数据业务和技术架构简图从上图可以看出，整个大数据框架中，涉及到很多数据传输和处理任务。而这些任务有不少都是需要每天运行，或者定时运行的。由于这些脚本之间往往存在着先后或者互相依赖关系，有时候还需要设置一些重试机制。虽然linux的contab机制加上脚本中代码逻辑，可以实现脚本依赖运行，甚至重试策略机制，但这样无疑会让脚本代码变得非常复杂，而这背离了脚本的书写逻辑。脚本的书写逻辑一般是一个脚本做一件事情，尽量避免复杂化。复杂的逻辑可