Azkaban 应用

本文详细介绍了Azkaban的使用,包括单一job案例、邮件通知配置、多job工作流、Java操作、HDFS操作、MapReduce任务以及Hive脚本任务。每个案例都包含具体的步骤,从创建job描述文件、打包上传到执行和结果检查,覆盖了Azkaban的基础操作和高级功能。

Azkaban 内置的任务类型支持 command、java

1 、单一 job 案例

1.案例实操

1)创建 job 描述文件

#command.job
type=command
command=mkdir /opt/module/test_azkaban

2) 将 job 资源文件打包成 zip 文件

注意: 目前,Azkaban 上传的工作流文件只支持 xxx.zip 文件。zip 应包含 xxx.job 运行作业所需的 文件和任何文件(文件名后缀必须以.job 结尾,否则无法识别)。作业名称在项目中必须是 唯一的。

3)通过 azkaban 的 web 管理平台创建 project 并上传 job 的 zip 包

首先创建 project

上传 zip 包

 4)启动执行该 job

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值