kettle后台执行JOB报错

最新推荐文章于 2025-07-02 11:41:03 发布
最新推荐文章于 2025-07-02 11:41:03 发布
阅读量1.5k 收藏
点赞数
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/devillhanter/article/details/52351475
本文介绍了解决从SQLServer2012到MySQL数据库进行数据同步时出现的日期格式错误问题的方法。通过更新MySQL的驱动包，成功解决了数据同步任务中的日期字段转换错误。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

job的任务是将sqlserver2012中的一张表的数据同步到mysql数据库中，报错信息如下：

Data truncation: Incorrect datetime value: '' for column 'LOG_TIME' at row 1


找到kettle主目录下的JDBC目录 ：/home/kettle/data-integration/libext/JDBC 

发现mysql的驱动包为：mysql-connector-java-3.1.14-bin.jar

于是更换为更新的jar包：mysql-connector-java-5.1.22-bin.jar

之后job执行成功!

devillhanter
关注
java程序控制KETTLE JOB的执行
Jbase的博客
03-22 3938
有时候我们想在java程序中触发远程服务器上kettle job的执行，并且获得执行结果。kettle的carte提供了远程执行job和transfer的功能。 我使用的kettle是6.1版本，部署在linux服务器上，没有使用资源库。 下面介绍下各个步骤：为了方便以windows系统为例 1、开启carte服务，在kettle安装目录下，运行Carte.bat,直接上图 直接打Ca...
kettle执行job
freespace
03-27 941
ETL高级教程kettle 博客分类：   kettle   1，Kettle跨平台使用。    例如：在AIX下（AIX是IBM商用UNIX操作系统，此处在LINUX/UNIX同样适用），运行Kettle的相关步骤如下：    1）进入到Kettle部署的路径    2）执行 chmod *.sh，将所有shell文件添加可执行权限    3）在Kettle路径下，如果...
sql server定时作业调用Kettle job出错的快速解决方法
12-16
错误信息： Unable to list jar files in plugin folder ‘C:Windowssystem32configsystemprofile.kettleplugins’ Unable to get VFS File object for filename ‘C:Windowssystem32configsystemprofile.kettleplugins’ : Could not find file with URI “C:Windowssystem32configsystemprofile.kettleplugins” because it is a rel
Kettle执行Job报Exception while loading class org.gjt.mm.mysql.Driver
weixin_33979203的博客
09-07 148
2019独角兽企业重金招聘Python工程师标准>>> ...
【无标题】
最新发布
qq_36551302的博客
07-02 148
在kettle执行的过程中，如果遇到错误，kettle会停止运行。在某些时候，并不希望kettle停止运行，所以就要处理下这些错误行。如下图，在表输出上勾选【忽略插入错误】，之后再运行时，就能成功，但是因为这样不是批量插入，插入速度上要比批量插入的模式慢很多。例如这两天发现在一个转换中，总数出现一些不规则数据，这些数据一出现，就会导致转换停止。因为是垃圾数据，所以说，这些数据不要也没什么影响。
kettle后台执行job
龙哥(webnum)说的，每天进步一点点，总有一天会实现梦想！
04-25 3052
环境：linux7 ./kitchen.sh -file=/目录/job.kjb >> /日志/success.log
kettle pan.sh如何后台运行
信徒博客
06-03 470
kettle运行转换，当前终端关闭，仍然能够继续运行。
kettle后台命令执行任务
princejwg的博客
05-06 7913
kettle后台命令执行任务kitchenPan配置定时任务 kitchen kitchen是一个作业执行引擎，用来执行作业。这是一个命令行执行工具， 参数说明如下 -rep:Repository name 任务包所在存储名 -user:Repository username 执行人 -pass:Repository password 执行人密码 -job:The name of the job...
kettle 运行时内存溢出问题调优经验总结
qq_36211262的博客
08-10 8189
大概意思就是说，JVM花费了98%的时间进行垃圾回收，而只得到2%可用的内存，频繁的进行内存回收(最起码已经进行了5次连续的垃圾回收)，JVM就会曝出java.lang.OutOfMemoryError: GC overhead limit exceeded错误。objectTimeout=1440 默认一天，即将执行完成的Job对象保留一天时间，可以在kettle.properties中自定义该属性的值，这边改的是5分钟，即任务执行完成后5分钟就会被扫描成过期的对象，让它尽量在年轻代就被回收掉。.....
Kettle系列（二）smart-kettle本地离线部署
最强菜鸟
08-14 4498
kettle先说明一下什么是kettle，相信做过数据清洗的观众应该对这个工具不陌生，它是用于数据清洗的很常见的开源的工具，官方的解释如下Kettle 是一款国外开源的 ETL 工具，纯 Java 编写，绿色无需安装，数据抽取高效稳定 (数据迁移工具)。Kettle 中有两种脚本文件，transformation 和 job，transformation 完成针对数据的基础转换，job 则完成整个工作流的控制。通俗点讲就是一个平时用于数据治理方面的工具，例如数据同步、数据迁移、数据清洗等。
kettle 安装使用
xjsbenpaolv的博客
09-19 736
Kettle 安装使用 1、环境准备 1.1安装java JDK 1）首先到官网上下载对应JDK包，基于其他系统应用共享jdk，建议jdk版本1.8以上 2）安装JDK； 3）配置环境变量 4）测试jdk安装成功 2、安装 2.1、下载软件 进入如下链接： https://community.hitachivantara.com/...
kettle - JOB循环 , 用于kettle失败后重试 !
01-14
kettle - JOB循环 , 用于kettle失败后重试 ! 具体内容请下载查看!这里不多做解析 ! kettle - JOB循环 , 用于kettle失败后重试 ! 具体内容请下载查看!这里不多做解析 !
linux环境下部署kettle，执行kitchen.sh文件报错后提示安装 libwebkitgtk 所需rpm包
11-14
kettle-linux环境下部署kettle，执行kitchen.sh文件报错后安装 libwebkitgtk，提示没有可用软件包libwebkitgtk 详细流程：https://blog.youkuaiyun.com/m0_37618809/article/details/81015492#commentBox
kettle学习二_后台执行
M_0307的博客
04-07 1502
认真学习了别人的博文，学习了kettle的使用，结果发现最重要的是第三篇，要用java程序调kettle来执行。 所以，接着学习。 一：学习时不懂的知识 脚本script是使用一种特定的描述性语言，依据一定的格式编写的可执行文件，又称作宏或批处理文件。脚本通常可以由应用程序临时调用并执行。各类脚本目前被广泛地应用于网页设计中，因为脚本不仅可以减小网页的规模和提高网页浏览速度，而且可以
【原】kettle carte 打包运行job出现不能读取子转换的问题解决。
我是程序员，为了最后的阵地
09-03 1158
这两天的根据 kettle 5.0.1 源码改进成，web端可控的项目。本来项目进展顺利，接近收尾工作，不成想尽然一个系统bug，阻挡了我前进的道路。花了一个上午的时间，各种找资料，后来发现用一个jar包替换后，问题解决。没有办法的办法了。这里记录下，以防后期出现不可预知的问题。     PDI-3971      Running an exported Job fails inter...
Kettle 定时任务（后台任务）
dzdffg的博客
03-12 1472
作者：开心跳蚤 来源：简书 转载地址：https://www.jianshu.com/p/7e9a02dec8d2 摘要： Kettle的Kitchen和Pan Kitchen——作业(job)执行器 (命令行方式) Pan——转换(trasform)执行器 (命令行方式) 下面我们将重点讲解经常会用到的 ***作业执行器 Kitchen.bat *** 。 Kitchen 参...
Kettle（一） 安装
weixin_43329319的博客
08-21 375
文章目录1、Kettle介绍2、JDK安装3、Kettel安装 1、Kettle介绍 Kettle是一款国外开源的ETL工具，纯java编写，可以在Windows、Linux、Unix上运行，数据抽取高效稳定。Kettle 中文名称叫水壶，该项目的主程序员MATT 希望把各种数据放到一个壶里，然后以一种指定的格式流出。 Kettle家族目前包括4个产品：Spoon、Pan、CHEF、Kitchen。 SPOON 允许你通过图形界面来设计ETL转换过程（Transformation）。 PAN 允许你批量运行
手工自动重跑kettle报错Job
xinxinghe的专栏
06-03 1831
需求如下：每天kettle Job调度可能报错一大堆，为了重跑报错Job，又不能一次全部执行报错Job（服务器负载过大，导致每个Job执行时间变长，甚至报错不能分配内存错误），必须等一些Job执行完毕后再执行，浪费睡觉时间，咱们可以写脚本，早上起来发现报错后，执行脚本，然后就可以去继续睡觉了。 脚本如下：#!/bin/ksh #job执行的2个日期参数 CurDay=`date +%Y%m%d`
kettle 执行报错是
03-14
<think>好的，我现在需要解决用户提到的Kettle执行时的报错问题。用户提供了四个引用，其中涉及不同的错误情况，比如KarafBlueprintWatcher的未知错误、增加字段报错、NoClassDefFoundError以及资源库管理相关的问题。首先，我应该整理这些引用中的信息，看看有哪些常见的解决方案。 首先，引用[1]提到更新Kettle版本可能解决KarafBlueprintWatcher的错误。这可能是一个通用的建议，因为新版本通常会修复已知的bug。用户的问题可能和版本过旧有关，所以需要检查当前使用的Kettle版本，并考虑升级。 引用[2]提到了使用kitchen命令行工具执行作业时的错误日志记录方法，即通过指定-level Error来查看详细日志。这可能对用户有帮助，因为分析错误日志是解决问题的关键步骤。需要指导用户如何获取并分析日志。 引用[3]中的错误是NoClassDefFoundError，具体缺少的是SWT的Control类。这可能是因为环境配置问题，比如缺少相关的SWT库文件或者路径配置不正确。可能需要用户检查Kettle的依赖库是否正确安装，或者是否与其他软件存在版本冲突。 引用[4]涉及使用Kettle的Java API时遇到的资源库管理和脚本执行问题，这可能与项目依赖或配置有关。用户可能在使用代码调用Kettle功能时出现了错误，需要检查引入的jar包是否正确，是否有版本兼容性问题。 接下来，我需要将这些信息整合成一个结构清晰的解决方案。首先建议检查错误日志，因为这是定位问题的第一步。然后检查环境配置，特别是SWT相关的问题。接着处理资源库配置，比如数据库连接和权限。如果问题依旧，可能需要更新Kettle版本或检查项目依赖。最后，提供社区和文档的支持途径。 需要注意的是，用户的问题可能属于多种错误类型，所以解决方案要覆盖不同的可能性。同时，确保回答中使用正确的格式，比如行内公式用$...$，独立公式用$$...$$，但在这个问题中可能不太需要数学表达式，所以主要关注代码块和引用标识的正确使用。另外，生成的相关问题需要与Kettle报错相关，比如分析日志的方法、环境配置步骤、资源库配置问题等。</think>### Kettle执行报错解决方案 #### 1. **检查错误日志** 首先通过命令行工具（如`kitchen`或`pan`）执行脚本时添加`-level Error`参数获取详细错误信息： ```bash kitchen -rep 资源库名称 -job 作业名称 -level Error ``` 日志会明确提示错误类型（如类缺失、数据库连接失败等），例如`NoClassDefFoundError: org/eclipse/swt/widgets/Control`表明缺少SWT组件[^3]。 --- #### 2. **验证环境配置** - **依赖库问题**： 若报错与`SWT`相关（如引用[3]），需检查Kettle安装目录下的`libswt`相关JAR文件是否完整，或尝试替换为对应操作系统的SWT版本。 - **Java版本兼容性**： 确保使用Java 8或与Kettle版本兼容的JDK，避免高版本JDK导致兼容性问题。 --- #### 3. **修复资源库配置** - **数据库连接问题**： 若资源库使用数据库存储（如MySQL），检查连接参数（URL、用户名、密码）是否正确，并确认数据库服务可用[^4]。 - **权限问题**： 确保资源库目录和脚本文件的读写权限正常，避免因权限不足导致操作失败。 --- #### 4. **更新或修复Kettle版本** - **升级到最新版本**： 若错误涉及`KarafBlueprintWatcher`（引用[1]），可能是旧版本已知Bug，升级到Kettle 9.x或更高版本可解决。 - **校验依赖包**： 通过Maven或手动添加确保项目依赖的`pentaho`系列JAR包完整，避免因依赖缺失导致类加载失败[^4]。 --- #### 5. **代码调用注意事项** 若通过Java API执行转换（如引用[4]），需正确初始化资源库连接： ```java KettleEnvironment.init(); RepositoryMeta repositoryMeta = new DatabaseRepositoryMeta("id", "name", "Database", "host", "db", "port", "user", "pass"); Repository repository = new DatabaseRepository(); repository.init(repositoryMeta); repository.connect("admin", "admin"); ``` 确保代码中资源库路径、脚本名称与实际一致。 --- #### 6. **社区与文档支持** - 查阅[Kettle官方文档](https://help.pentaho.com/)获取最新配置指南。 - 访问开源社区（如Gitee项目）参考类似问题的解决方案。 ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值