
Kettle
Cym02
才疏学浅 欢迎大家一起沟通,讨论
展开
-
Kettle实现:MongoDB与MySQL数据互传
上面的复选框选择是否输入json格式,这时不选。选择 ”bigdata-mongodb ouput"组件。在kettle中,mongodb input组件。点击get fileds,获取字段对应关系。二、mysql数据迁移到mongodb。输入数据数据和集合(没有集合自动创建)一,mongodb传数据到mysql。编辑mongodb output组件。选择“表输入”组件,编辑表输入。原创 2022-11-17 09:57:41 · 1097 阅读 · 0 评论 -
kettle报错 GC overhead limit exceeded(内存溢出问题)
kettle内存溢出的相关设置 GC overhead limit exceededSpoon.bat(windows端)和Spoon.sh(linux端)里设置的内存太小,可以设置为机器内存的1/4,比如16G内存,可以设置到4G。初始配置-Xms初始的Heap的大小。-Xmx最大Heap的大小。在很多情况下,-Xms和-Xmx设置成一样的。这么设置,是因为当Heap不够用时,会发生内存抖动,影响程序运行稳定性。[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img原创 2021-12-09 16:00:39 · 6194 阅读 · 2 评论 -
kettle数据库链接共享(或本地配置文件)
在一个文件里,新建所有需要共享的数据库链接。然后右键数据库链接,点共享。之后重启Kettle可以完成共享,或者重复共享,取消共享操作。共享操作主要是修改了,kettle本地的配置文件shared.xml有需要的小伙伴,可以直接在配置文件里永久修改。如果有把脚本同步到线上的需求,在共享数据库连接后。对需要更改的文件进行保存即可。...原创 2021-12-03 10:21:34 · 6210 阅读 · 0 评论 -
Kettle打开后闪退,秒退 (Couldn‘t read the database cache)
我遇到的问题是,kettle执行较复杂脚本时秒退。之后打不开的问题具体可以在运行日志中找到问题2021/11/17 16:42:16 - ERROR (version 9.1.0.0-324, build 9.1.0.0-324 from 2020-09-07 05.09.05 by buildguy) : Error starting Spoon shell2021/11/17 16:42:16 - ERROR (version 9.1.0.0-324, build 9.1.0.0-324 from原创 2021-11-17 18:14:34 · 7034 阅读 · 2 评论