Kettle 5.2中JavaScript代码插件的用法

最新推荐文章于 2024-09-05 10:38:27 发布
最新推荐文章于 2024-09-05 10:38:27 发布
阅读量216 收藏
点赞数
分类专栏： ETL/BI 文章标签： ETL/BI
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/gladmustang/article/details/88329496
版权
本文介绍Kettle中JavaScript代码插件的使用方法，包括转换过程、生成记录、合并列并增加时间后缀及输出字段的示例。通过实际案例展示了如何在插件界面直接编写JavaScript代码，并通过JDK的ScriptingAPI执行。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

Kettle 中的 JavaScript代码插件使用了JDK1.6中对脚本语言的支持功能， Sun的JDK6实现包含了一个基于Mozilla Rhino的脚本语言引擎，支持JavaScript， Kettle中的用法和JDK1.6中的用法是一致的， 唯一不同的是在jdk环境中写代码的话， 需要使用JDK Scripting API显示 执行js代码（js代码被放在一个String里）； 而在这个插件界面里面是直接写js代码即可以，Kettle后台会通过 JDK的Scripting API进行执行。

Kettle示例：

1. 总的转换过程

[img]http://dl2.iteye.com/upload/attachment/0103/7691/aec1aa41-4578-3668-b639-0615b59ccb12.jpg[/img]

2. 生成记录步骤

[img]http://dl2.iteye.com/upload/attachment/0103/7695/bb53c7fd-5de0-38e4-8cc9-b7aa5c253327.jpg[/img]

3. 使用JavaScript代码插件合并name和age列，并增加一个时间后缀

[img]http://dl2.iteye.com/upload/attachment/0103/7697/5b723334-b1df-34a8-9246-9013c03fa690.jpg[/img]

4. 输出字段

[img]http://dl2.iteye.com/upload/attachment/0103/7699/98e419b4-87e7-381e-8ed8-e5f1ca8a43f9.jpg[/img]

如果步骤3修改如下：（用mergeColumn列替换原先的name列）
[img]http://dl2.iteye.com/upload/attachment/0103/7703/72371568-e7ef-31be-a7da-755acac5cd6f.jpg[/img]

那么步骤4字段输出如下：（name列的输出就是原先的name和age的合并值加时间后缀）

[img]http://dl2.iteye.com/upload/attachment/0103/7705/2f35ad15-911c-38e4-9e5b-bb49e3d58463.jpg[/img]
关于kettle中Javascript的使用，以及方法完全解释
ytp552200ytp的博客
05-22 1574
Kettle 使用js脚本生成新的行和列
最新发布
亮大大的博客
04-08 128
示例：根据开始和结束日期获取中间的所有整点时间。
kettle使用javascript脚本增加输出列
风子杨的博客中心
01-15 3656
kettle中的插件集成了javascript，也就是js脚本。大家都知道kettle是java语方开发的开源工具。也就是说支持js脚本，就是java调用js脚本。 DK1.6开始，Java引入了jsr223，就是可以用一致的形式在JVM上执行一些脚本语言，如js脚本。 在日常处理数据中，经常会遇到在节点的输出流中增加列，来生成新的数据处理结果。如何在js脚本中增加数据列。如下图： 在下...
KETTLE案例-结合JavaScript使用
FORLOVEHUAN的博客
08-20 5142
1、打开Spoon.bat 新建转换 打开输入 双击表输入 2、表输入–》源数据库 步骤名称可自定义 点击新建：填写数据库信息 mysql 数据库需要下载相应驱动：mysql5,选择了其中一个mysql-connector-java-5.1.26-bin.jar 放在pdi-ce-8.2.0.0-342\data-integration\lib文件夹下即可，有很多文章要求放在pdi-ce-8.2.0.0-342\data-integration\libswt\win64下面，测试过了，不需要的 3、
kettle组件javaScript脚本案例1
大蚂蚁2号的博客
06-26 7791
javaScript脚本这个组件用处还是很方便的，比如： js脚本写起来很方便，不用像java脚本要有固定的代码块，输出字段也要写两遍； 创建新行，一行变多行; 使用java类； 封装好了很多方法，字符串、日期、数字、文件操作相关常用的方法都封装好了； 可以写多个javaScript脚本，自定义function，定义js全局变量； 案例1：生成随机字符串. 文件位置： $KETTL...
Kettle中的数据转换函数与脚本使用技巧：提升数据处理的5个技巧
[Kettle中的数据转换函数与脚本使用技巧：提升数据处理的5个技巧](https://www.stechies.com/userfiles/images/extract-substing-string-javascript.png) # 摘要 本文详细探讨了Kettle数据转换及脚本应用的多个方面...
【最佳实践】：处理Kettle转换中MySQL数据类型差异
![Kettle与MySQL数据库连接.docx](https://opengraph.githubassets.com/dce23fa67651deae8ea3f0f83c069dab9c1d33d8804e36ea6f8fb83380d8ea9c/pentaho/pentaho-kettle) ...文章接着提出了多种Kettle转换MyS
Kettle在Linux中的最佳实践：数据集成的艺术
Kettle作为一款强大的数据集成工具，在数据抽取、转换和加载（ETL）领域中扮演着关键角色。本文首先介绍了Kettle的基本概念及其在数据集成中的重要性。随后，详细解析了Kettle的核心组件，包括其主要组件、数据集成...
Kettle在Linux中的高级配置与故障排查：专家级解决方案
![Kettle在Linux中的高级配置与故障排查：专家级解决方案]...同时，探讨了其在数据集成中的实践应用，并强调了通过插件开发、API使用及大数据处理扩展其功能的重要性。案例研究与专
【数据质量管理】：在Kettle表结构中的高效应用
![【数据质量管理】：在Kettle表结构中的高效应用]...文中详细探讨了数据质量的重要性和管理原则，包括数据质量的维度、度量标准以及清洗和校验的技术方法，并展示了如何将这些理论应用于Kettle工具中。
Kettle_js脚本_示例
热门推荐
God_Father_kao的博客
04-22 1万+
Kettle 版本7.0 一，String function 1 .date2str //js操作时间 var dValue = new Date(); //把时间变成字符串 var dValue1 = date2str(dValue); //把时间变成当前格式字符串 var dValue2 = date2str(dValue,"dd.MM.yyyy"); //把时间变成当前格式...
kettle使用JavaScript代码连接数据库获取数据
椰汁菠萝
09-05 893
使用kettle处理数据时，有时，数据较为复杂，比如，我这次需要处理json数组，并把数组中的值从存储id变为存储code;这个时候写代码显然是更好的解决方案，由于我本地java脚本有点问题，因此选择使用JavaScript脚本处理。
kettle-JavaScript脚本
weixin_41668007的博客
07-06 836
结果 取数前 增加序列前 增加序列后 取数后
Kettle>Javascript脚本组件
qq_44509920的博客
05-03 6591
文章目录Kettle Javascript脚本组件Test21 JS脚本编写代码过程 Kettle Javascript脚本组件 Kettle中可以通过脚本完成一些复杂的操作 javascript脚本就是使用javascript语言通过代码编程来完成对数据流的操作 JS中有很多内置函数，可以在编写JS代码时查看 存在两种不同的模式不兼容模式和兼容模式 不兼容模式：是默认的，也是推荐的 兼容模...
kettle时间维度_学习笔记系列----1、kettle之js实现日期维度
weixin_33208553的博客
02-01 589
最近在《Pentaho Kettle解决方案：使用PDI构建开源ETL解决方案》一书中看到了构建时间维度的kettle过程，进行一下学习记录。对kettle有兴趣的可以去看一下这本书，很不错的一本书。整体分解Generate 1 years生成一年的数据行生成一年的数据行(365条)，并生成几个常量。initial_date设置初始日期是 2017-01-01language_code 语言代码设...
kettle etl工具
11-11
详细介绍kettle中的各个组件。介绍实战中一些问题的处理。
Kettle中JavaScript代码统计总分
03-29
<think>嗯，用户想在Kettle里用JavaScript代码来统计总分。那我得先回忆一下Kettle里的JavaScript组件是怎么工作的。根据引用[1]，Kettle的JavaScript组件允许用户用脚本修改数据，对吧？那用户需要汇总字段的值，应该需要遍历行里的各个数值字段，然后累加。 首先，用户需要确定哪些字段是数值类型的，因为在处理时可能得区分不同类型。引用[3]里的例子有检查字段类型是否是Number，然后转换成数字进行累加。所以这可能是个关键步骤。用户需要先获取每一行的字段，然后判断类型，如果是数值类型，就累加到总分变量里。 然后，用户需要在JavaScript代码组件里初始化总分变量，可能在var之前的部分，比如var 总分 = 0；然后在每行处理的时候，循环各个字段，判断类型并累加。接着把总分赋值给一个新的字段，比如total_score。 不过要注意，Kettle的JavaScript组件处理的是每一行数据，所以可能需要确保每个输入行都有需要统计的字段。另外，变量作用域的问题，总分变量是否需要是全局的，或者每行独立？可能需要用row对象来存储中间结果，或者使用全局变量？ 还有，用户可能需要连接各个组件，比如Excel输入，JavaScript代码组件，然后输出。引用[2]提到了如何将组件拖到工作区并连接起来，所以用户需要正确设置组件的连接顺序。 另外，数据类型转换的问题，比如字符串转数字，引用[3]里的str2num函数可能有用，或者用JavaScript的parseFloat函数。需要确保转换正确，避免NaN的情况。 最后，测试代码是否正确，可能需要输出总分，或者进行调试。用户可能需要查看处理后的数据，确认总分是否正确累加。 总结步骤应该是：添加JavaScript组件，遍历字段，判断数值类型，累加，存储总分到新字段。同时要注意组件的连接和变量的作用域处理。</think>### 分步实现指南 #### 步骤1：添加JavaScript代码组件 1. 在Kettle转换工程中，从【核心对象】选项卡中找到【脚本】分类 2. 拖拽【JavaScript代码】组件到工作区 3. 建立数据流连接（如：Excel输入 → JavaScript代码 → 输出组件）[^2] #### 步骤2：编写字段遍历逻辑 ```javascript // 初始化总分变量 var 总分 = 0; // 遍历所有字段 for (var i=0; i<getInputRowMeta().size(); i++) { var valueMeta = getInputRowMeta().getValueMeta(i); var fieldValue = row[i]; // 类型判断与数值转换 if (valueMeta.isNumeric()) { 总分 += parseFloat(fieldValue); // 确保处理空值情况 } } // 输出结果 trans_Status = CONTINUE_TRANSFORMATION; ``` *注：`getInputRowMeta()`可获取字段元数据，`row[]`数组包含当前行数据* #### 步骤3：创建新输出字段 1. 在组件属性面板的【字段】选项卡 2. 添加新字段（如：字段名称`total_score`，类型为Number） #### 步骤4：数据类型处理优化 ```javascript // 增强型数值处理 if (valueMeta.isNumeric() && !isNaN(fieldValue)) { 总分 += (valueMeta.getType() == ValueMetaInterface.TYPE_INTEGER) ? parseInt(fieldValue) : parseFloat(fieldValue); } ``` *参考Kettle的数值类型判断机制[^3]* #### 步骤5：调试与验证 1. 使用【调试转换】功能验证计算结果 2. 添加【写日志】组件输出中间值 3. 检查空值、非数值字段的过滤情况
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值