azkaban使用--依赖dependencies作业

最新推荐文章于 2023-09-12 21:36:55 发布

转载最新推荐文章于 2023-09-12 21:36:55 发布 · 1.4k 阅读

0 ·

CC 4.0 BY-SA版权

原文链接：http://www.cnblogs.com/pu20065226/p/10784260.html

文章标签：

#shell #java

本文详细介绍了如何使用Azkaban进行作业的创建和执行流程。首先通过shell命令创建了两个作业，分别为job one和job two，其中job two依赖于job one。然后将包含这两个作业的文件夹压缩成zip格式，以便于上传到Azkaban平台进行执行。最后，通过查看flow log来确定作业运行的状态和节点。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

1.创建作业

[root@localhost azkaban_job]# ls
one.job  two.job
[root@localhost azkaban_job]# cat one.job 
type=command
command=echo "this is job one"
[root@localhost azkaban_job]# cat two.job 
type=command
dependencies=one
command=echo "this is job two"
[root@localhost azkaban_job]# cd ..
[root@localhost shell]# ls
azkaban_job
[root@localhost shell]# zip -r azkaban_job20190428.zip azkaban_job/
  adding: azkaban_job/ (stored 0%)
  adding: azkaban_job/one.job (deflated 11%)
  adding: azkaban_job/two.job (deflated 8%)
[root@localhost shell]#