Azkaban嵌套流的依赖

最新推荐文章于 2025-01-04 20:34:47 发布

原创

最新推荐文章于 2025-01-04 20:34:47 发布 · 1.3k 阅读

9 ·

CC 4.0 BY-SA版权

文章标签：

#azkaban #任务调度 #大数据

本文详细解析了如何在Azkaban工作流中使用EmbeddedFlows定义嵌套工作流，包括依赖结构实例和文件夹布局，帮助读者掌握不同嵌套工作流间的依赖实现方法。

Azkaban嵌套流的依赖

在Azkaban工作流的定义文件中可以添加子工作流

查看官方文档

https://azkaban.readthedocs.io/en/latest/createFlows.html

给出了Embedded Flows定义嵌套工作流的实例

nodes:
  - name: jobC
    type: noop
    dependsOn:
      - embedded_flow
 
  - name: embedded_flow
    type: flow
    config:
      prop: value
    nodes:
      - name: jobB
        type: noop
        dependsOn:
          - jobA
 
      - name: jobA
        type: command
        config:
          command: pwd

结构如下