在kettle中使用java直接调用transformation、job文件执行

本文详细介绍了如何在Kettle8.0版本中,通过Java代码调用已创建的转换(transformation)和任务(job)。文章首先列举了所需的所有jar包,包括kettle系列、guava、metastore和mysql-connector等。接着,提供了完整的java代码示例,演示了如何初始化Kettle环境,加载并执行转换。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

目前在做一个项目,需要用到数据清洗,因为kettle是开源的,所以就选择了它。目前遇到的困难是,在创建好转换(transformation)或任务(job)后,需要集成到java代码中,以便和其他功能结合。由于网上很多例子的kettle版本是4.x以及5.0左右的,而kettle 6.0版本较之前有了很大改动,这些java代码已经不适合用于kettle 8.0了。经过在网上查资料以及在论坛里查找资料和提问之后,终于解决了如何让java通过kettle 8.0版本调用转换和job。

1,需要哪些jar包


kettle开头的包都需要,也许这个项目有些包不用,但最好加进去。另外guava、metastore和mysql-connector包也是必须的,不然程序会报错。其他包自己看着加入吧

2,在spoon上创建转换或job
在这里就不叙述了,我有时间会在另一篇博客中记录如何使用spoon上的控件创建转换和job。有需要可以看看。


3,java代码示例

 
import org.pentaho.di.core.KettleEnvironment;
import org.pentaho.di.core.exception.KettleException;
import org.pentaho.di.trans.Trans;
import org.pentaho.di.trans.TransMeta;
 
public class ExistTrans {
 
    public static void runTransformation() {
        try {
            String filename = "C:\\Users\\Francis\\Desktop\\table.ktr";
            // StepLoader.init();
            // EnvUtil.environmentInit();
            KettleEnvironment.init();
            TransMeta transMeta = new TransMeta(filename);
            Trans trans = new Trans(transMeta);
 
            trans.execute(null); // You can pass arguments instead of null.
            trans.waitUntilFinished();
            if (trans.getErrors() > 0) {
                throw new RuntimeException(
                        "There were errors during transformation execution.");
            }
        } catch (KettleException e) {
            // TODO Put your exception-handling code here.
            System.out.println(e);
        }
    }
 
    public static void main(String[] args) {
 
        runTransformation();
    }
}

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值