kettle-作业+转换-动态生成文档-统计分类使用

最新推荐文章于 2025-10-23 12:22:12 发布

原创最新推荐文章于 2025-10-23 12:22:12 发布 · 931 阅读

·

2

·

CC 4.0 BY-SA版权

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

文章标签：

#分类 #数据挖掘 #人工智能 #etl #kettle

工具同时被 3 个专栏收录

16 篇文章

订阅专栏

10 篇文章

订阅专栏

4 篇文章

订阅专栏

本文档介绍了如何使用Kettle（cKettle）的作业和转换功能，特别是变量功能，来动态生成文档并进行统计分类。通过设置全局变量、校验字段、更新变量和执行转换，实现复杂业务流程。重点组件包括‘设置变量’、‘校验字段的值’和‘动态导出文件’，展示了Kettle在预处理、业务处理及日志记录等方面的应用。

kettle-作业+转换-动态生成文档-统计分类使用

使用 kettle 的国内汉化版 cKettle。除了汉化的更彻底，其他和开源kettle都一样
作业+转换-动态生成文档-统计分类使用
主要是使用 kettle 的变量功能实现

本文档是给已经开始上手 kettle 的同学看的，比如我自己，平时只用到转换功能

先上结果图

在这里插入图片描述

作业图

在这里插入图片描述

用到的组件

在这里插入图片描述

全局变量

在空白位置，右键弹出功能选择【作业属性】
在这里插入图片描述
定义全局变量

也可以使用组件【设置变量】实现

校验字段的值

本组件，主要是判断变量是否超过最大值，结束循环使用
双击组件，根据情况选择内容并设置需要判断的字段
在这里插入图片描述
选项使用变量

数据类型不要选错了

当前判断符号 <=

更新变量

组件【设置变量】也可以修改变量的值
双击组件
在这里插入图片描述
根据情况，选择范围

计算转换设置

根据自己喜好，设置组件名称。选择执行的转换文件
在这里插入图片描述
调整参数

业务处理转换

同上，这个是执行动态业务处理的转换文件
在这里插入图片描述

预处理-转换1

当前转换，主要是预处理下标累加、获取到动态内容

获取变量

注意全局变量是 string 类型
在这里插入图片描述

js 脚本预处理

这个组件，要根据下标获取内容，并更新下标字段（镜像）的值，方便下一步设置临时变量
预处理的核心组件
在这里插入图片描述

写日志

打印日志使用，可移除。当前是调试使用
在这里插入图片描述

设置作业内临时变量

将预处理的下标数字，设置为作业内可使用的临时变量
在这里插入图片描述

复制记录到结果

将当前转换的内容传给同一作业内其他转换
在这里插入图片描述

其他

也可以在转换里面使用内部全局变量
右键空白
在这里插入图片描述

业务处理-转换2

实际的业务处理，可能很复杂。当前只是验证动态功能
在这里插入图片描述

从结果获取记录

这里的结果，是上一个转换复制的记录。当前不做处理，只是验证
在这里插入图片描述

打印日志

在这里插入图片描述

动态导出文件

前面做的所有工作，其实都是为了在这里使用。
也可以在 Excel 导出动态 sheet 使用
在这里插入图片描述

执行日志

在这里插入图片描述

实际业务使用效果

在这里插入图片描述

end

评论

被折叠的条评论为什么被折叠?

到【灌水乐园】发言

查看更多评论

添加红包

成就一亿技术人!

hope_wisdom

发出的红包

实付元

使用余额支付

点击重新获取

扫码支付

钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。