Kettle Spoon的循环实例 详细全流程 JS控制循环
1. 背景
因为在分析数据时,需要对所有店铺所有的listing进行一些分类查询操作。
一次性查找所有的店铺,查询时间会超上千秒,甚至会出现超时错误。
如果一次指定一个店铺,效率会提高数十倍。
因此需要设置一个循环,每次查找一个店铺,将该店铺查询的数据保存到Excel表中。
实际业务会插入到数据库的表格中,插入Excel表中是出于教学目的。
该版本的最大循环条件为固定写死。想要自动调整最大迭代数的内容,可查阅 Kettle Spoon 循环v2 详细全流程 JS控制循环(2)自动查找最大迭代数 自适应最大循环次数
2. 具体流程
1) 主体Job

2)Start
3)设置变量
设置好最大循环次数 MAXROW ,以及当前的循环数 CURRENTROW
此处最大循环次数为固定写死的 570。若需要最大循环次数可自动调整,或者通过SQL查找某个值来设置最大循环次数,可参考: Kettle Spoon 循环v2 详细全流程 JS控制循环(2)自动查找最大迭代数 自适应最大循环次数

4) JS脚本:设置循环条件和循环体
设置循环条件:利用 JS 脚本实现跳出循环条件,并且每次循环将 CURRENTROW 逐步增加 1

var max = parent_job.getVariable("MAXROW");
var current = parent_job.getVariable("CURRENTROW");
current ++;
parent_job.setVariable("CURRENTROW",current);
if(current <= max)
true;
else
false;
5)转换
开启转换,并将 CURRENTROW 的值传递给转换

5.1)表输入:当前行店铺
获取 CURRENTROW 对应的店铺名称、店铺ID
①引用变量值时,需要利用格式 ${变量名}
②勾选 “替换 SQL 语句里的变量”

select
t.*
from (
select
row_number() over(order by ose.id) row
, ose.id OrderSourceID
, ose.ordersourcename OrderSourceName
from dbo.RB_OrderSource_Ebay ose (nolock)
where ose.status=1
) t where t.row=${CURRENTROW}
5.2)设置变量
设置变量,将上一部获取的名称和店铺ID插入到变量中

5.3)表输入
利用上一步设置的店铺ID值,查找该店铺的分类查询数据。
①引用变量值时,需要利用格式 ${变量名}
②勾选 “替换 SQL 语句里的变量”

select
*
from table_name t
where t.id=${ID}
5.4)Excel输出
将查询的结果输出为Excel,注意在最终文件名称中,引用 店铺ID 作为表格的表名输出。

325



被折叠的 条评论
为什么被折叠?



