Azkaban使用流程

Azkaban使用流程

转至元数据结尾

转至元数据起始

访问：

公共组件的Azkaban目前部署在l-job1.ppt.cn2服务器上，可以直接通过http://l-azkaban1.ppt.cn2.qunar.com:8081/index来进行访问

账号密码：

账号和密码都为azkaban，之后可能接入LDAP

 

创建工程：

点击右上角的Create Project 并输入工程名和描述来创建工程，通常一个任务建一个project。

上传Job：

点击进入project后，点击右上角的Upload上传任务，格式必须是zip

Job格式：

job文件必须以.job为后缀，并且zip压缩后上传

Command类型单一job示例

1、创建job描述文件

vi command.job

#command.job type=command                                                    command=echo 'hello'

2、将job资源文件打包成zip文件

zip command.job

3、上传job，见上一步

4、执行Job

Command类型多job工作流flow

1、创建有依赖关系的多个job描述

第一个job：foo.job

# foo.job

type=command

command=echo foo

 

第二个job：bar.job依赖foo.job

# bar.job

type=command

dependencies=foo

command=echo bar

 

2、将所有job资源文件打到一个zip包中

 

3、在azkaban的web管理界面创建工程并上传zip包

4、启动工作流flow

 

Command类型远程job工作流flow

1、创建job

 

type=command
command=ssh ucenterdev@l-data1.ppt.cn2 "sh /home/q/data/dailylocationrsync.sh"

#ssh到远程服务器执行脚本，必须有脚本中涉及的目录的权限

2、打成zip

3、执行job

 

定时任务：

 可以指定任务执行的时间，指定方式为cron表达式