shell-kitchen-job-资源库

最新推荐文章于 2024-11-06 10:39:57 发布

呆小妞

最新推荐文章于 2024-11-06 10:39:57 发布

阅读量567

点赞数 1

CC 4.0 BY-SA版权

分类专栏：开源文章标签： kettle

本文链接：https://blog.youkuaiyun.com/Angelhmm/article/details/85260751

开源专栏收录该内容

13 篇文章

订阅专栏

本文详细介绍了如何使用Shell脚本结合Kettle进行数据集成任务的自动化执行，包括设置环境变量、调用Kettle厨房脚本、配置Cron定时任务以及日志记录，适用于大数据处理场景。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

job.shell：
新建shell,使用vi

#!/bin/sh
export JAVA_HOME=/usr/local/app/jdk1.8.0_66
export LANG=en_US.UTF-8
job_name=$2
echo “------------start--------------”
cd ~/kettle/data-integration
sh kitchen.sh -rep=kettle -user=admin -pass=admin -dir=/BI_ODS/$1 -job= $KaTeX parse error: Expected group after '_' at position 42: \dots/data/logs/jobs_̲$ {job_name}.log &
echo “-------------end--------------”

crontab 设置
参数1：biz 动态包名
参数2：执行job文件名
sh resource_jobs.sh biz biz_job
定时
30 0 * * * sh ~/kettle/shell/resource_jobs.sh biz biz_job >> ~/kettle/shell/resource_jobs.log &

svn管理资源信息：
https://www.cnblogs.com/zigewb/p/4504199.html

sh kitchen.sh -rep=kettle -user=admin -pass=admin -dir=/BI_ODS/biz -job=biz_job -level=Basic >> ~/kettle/shell/logs/biz_job.log &