缘起
之前的任务一直使用的是crontab定时任务,要通过监听任务运行日志才可以知道任务执行失败,并且还要设置邮件发送比较麻烦。最重要的是crontab无法维护任务之间的依赖关系。而使用Azkaban可以很方便的管理任务之间的依赖关系,可以设置任务失败执行重试操作和邮件发送,NICE!
安装
首先第一步肯定是要上官网瞄一下啦! https://azkaban.github.io/azkaban/docs/latest/#overviewsolo server mode可以满足我们的需求,就是它了!
最好先创建一个工作目录,在工作目录里面操作,这里我创建了一个工作目录 /big_data,接着就按照官方文档的步骤来:
git clone https://github.com/azkaban/azkaban.git
cd azkaban;
./gradlew build
./gradlew build
./gradlew clean
./gradlew installDist
./gradlew test
./gradlew build -x test
./gradlew build installDist
画重