oozie 中添加 shell action

本文介绍如何在Oozie的工作流配置文件workflow.xml中添加并执行Shell脚本。首先需要在job.properties文件中指定脚本名称,然后编辑workflow.xml文件配置Shell Action节点,包括设置执行命令、脚本路径等。最后将这些文件上传到HDFS,并通过Oozie客户端启动作业。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

问题:如何在workflow.xml中添加shell脚本?

1、在job.properties中添加要执行的脚本的名字:


2、脚本tim.sh的输入内容为:

#!/bin/bash
curl http://114.55.28.121

3、编辑workflow.xml的内容如下:

<workflow-app xmlns="uri:oozie:workflow:0.4" name="shell-wf">
    <start to="shell-node"/>
    <action name="shell-node">
        <shell xmlns="uri:oozie:shell-action:0.2">
            <job-tracker>${jobTracker}</job-tracker>
            <name-node>${nameNode}</name-node>
            <configuration>
                <property>
                    <name>mapred.job.queue.name</name>
                    <value>${queueName}</value>
                </property>
            </configuration>
            <exec>${statEndNoticeShell}</exec>
            <argument></argument>
            <file>${statEndNoticeShell}</file>
            <capture-output/>
        </shell>
        <ok to="end"/>
        <error to="fail"/>
    </action>
    <kill name="fail">
        <message>Shell action failed, error message[${wf:errorMessage(wf:lastErrorNode())}]</message>
    </kill>
    <end name="end"/>
</workflow-app>

其中:<exec>脚本名</exex>是执行脚本的命令, <file>脚本的具体位置</file>存放脚本的位置,从项目的根目录算起。

4、将修改的workflow.xml和 tim.sh 文件上传到hdfs 上,这里我们上传目录为:

oozie.wf.application.path=${nameNode}/user/${user.name}/${examplesRoot}/apps/map-reduce

5、执行调度命令:

oozie job -ooziehttp://ssp-hadoop-01:11000/oozie -config job.properties -run

补充知识点:

job.properties是在本地服务器上,而workflow.xml文件和 tim.sh要上传到hdfs上。

由于执行shell命令的过程我们无法得知,这里通过curl去调用某一台Linux 服务器,此时我们可以利用tcpdump 命令监控这台Linux 服务器是否被调用。具体的命令为

sudo tcpdump -i eth1 port 80 and host 114.55.92.41

用法参见:如何利用tcpdump来确定外部设备是否连接到服务器?




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值