KETTLE -优化

1. 最直接的办法: 加内存 spoon.bat

在这里插入图片描述

2. 通过改变开始复制的数量

(针对查询控件或者耗时的控件,这种方式比较简单,需要多长尝试合理的复制数量)

在这里插入图片描述

3. 查询控件使用缓存,内存够大还可以直接加载全表数据

kettle是一个流式的处理过程,步骤与步骤之间的数据传递是通过缓存来完成的,调整缓存的大小可以对kettle的运行产生明显的影响。
在这里插入图片描述

4. 设置合理的流程方案(避免查询组件)

最好避免查询主键 , 可以使用merge into 实现更新 , 或者先通过sql脚本执行批量的删除,再进行插入
在这里插入图片描述

在这里插入图片描述

5. 设置表输出时批量提交的条数 commit

在这里插入图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值