Kettle通过环境变量PENTAHO_DI_JAVA_OPTIONS配置内存

最新推荐文章于 2024-03-26 09:14:15 发布
原创 最新推荐文章于 2024-03-26 09:14:15 发布 · 825 阅读 · 1 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#etl

通过在Windows系统的环境变量中添加PENTAHO_DI_JAVA_OPTIONS，可以设定Kettle启动时的内存分配，例如-Xms2g-Xmx8g确保最小2GB，最大8GB的内存使用，以提升其性能。

通过在Windows系统的环境变量增加PENTAHO_DI_JAVA_OPTIONS项，可以配置Kettle的内存设置

名称：PENTAHO_DI_JAVA_OPTIONS

内容：-Xms2g -Xmx8g

最小2GB，最大8GB

kettle pentaho_di_java_options,kettle8.3 win7环境下安装的注意点
weixin_34061587的博客
03-16 651
kettle的安装很简单，到官网下载解压即可。只是启动时可能碰到一些问题，需要注意一下：1. 启动时执行Spoon.bat一闪而退#需要编辑Spoon.bat，在其中找到该行，根据自己机器配置进行内存大小的调整if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms1024m" "-Xmx2048m" "-XX:Max...
kettle使用详解（一）
weixin_37763359的博客
12-17 1811
kettle使用详解（配置以及创建一个简单的转换） 开篇：其实在很久之前，就有想写博客的想法，鉴于种种原因一直也没有开始下笔。但是总结真的是一门学问，既能提高自己，又能惠及他人，何乐而不为。 所以笔者决定通过一系列的原创博文，来为需要使用相同技术的同学提供一条捷径，让大家能避过一些坑，旨在共同提高。 此系列为kettle的使用第一篇文章，接下来会从基础配置，简单抽取一直到复杂的数据库转换为大家讲解...
kettle pentaho_di_java_options,让kettle的执行速度飞起来
weixin_28801391的博客
03-16 2041
在前一篇文章xms/xmx/xss在kette中的调优设置中，我对kettle进行了一次优化，这次我们再一次进行优化，这次效果非常明显，这次优化有两部分：一、修改jvm添加xmn，二、修改日志输出级别在Java TM Performance一书中，有这样一段话：-Xmnisconvenienttosizeboththeinitialandmaximumsizeofthey...
理解环境变量 JAVA_TOOL_OPTIONS
weixin_33943347的博客
03-02 2000
JAVA_TOOL_OPTIONS是何物 有些应用不方便设置JVM参数，如命令行应用、通过JNI(Java Native Interface)API调用虚拟机的应用、脚本嵌入虚拟机中的应用等。这种情况环境变量JAVA_TOOL_OPTIONS就非常有用了，它会被JNI API的JNI_CreateJavaVM函数使用。 Note:在有些场...
kettle的内存大小修改
czx33859066的专栏
04-23 2897
kettle JVM内存设置---效果不明显
热门推荐
weixin_41160534的博客
06-20 1万+
1、查看本地JVM内存大小 JVM初始分配的内存由-Xms指定，默认是物理内存的1/64；JVM最大分配的内存由-Xmx指 定，默认是物理内存的1/4。默认空余堆内存小于 40%时，JVM就会增大堆直到-Xmx的最大限制；空余堆内存大于70%时，JVM会减少堆直到-Xms的最小限制。因此服务器一般设置-Xms、 -Xmx相等以避免在每次GC 后调整堆的大小。可以利用JVM提供的-Xmn...
kettle扩大运行内存
大蚂蚁2号的博客
12-04 7062
机器内存大，kettle却还是报错内存溢出，这时候可以尝试调整kettle的运行内存 在windows中运行修改Spoon.bat文件中的参数PENTAHO_DI_JAVA_OPTIONS -Xms最小运行内存，-Xmx为最大运行内存，m为内存单位，也可以直接设置g为单位 在linux中修改spoon.sh的参数PENTAHO_DI_JAVA_OPTIONS -XX:MaxPermSize=256mJVM最大允许分配的非堆内存，java8以上中已经移除了该参数，如果使用的jdk8以上可以把.
if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms5120m" "-Xmx20480m" "-XX:MaxPermSize=512m"第一点已经修改
最新发布
07-09
用户要求设置PENTAHO_DI_JAVA_OPTIONS环境变量或修改启动脚本中的内存参数。 根据之前的回答，我们已经知道修改Spoon.bat是核心优化步骤之一。 步骤： 1. 定位Kettle的安装目录，找到启动脚本Spoon.bat（用于...
kettle篇：kettle分页导入批量数据时遇到的错误
weixin_44625972的博客
01-12 764
最近使用kettle从Mysql数据导入Es中，因为使用分页导入，kettle持续运行导致：KETTLEjava.lang.OutOfMemoryError:Javaheapspace 基本上是让修改kettle安装目录中下的spoon.bat程序，用记事本等程序打开，找到 if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xmx512m" "-XX:MaxPermSize=256m" 部分，将其调整（一般调整...
Kettle 使用问题集
let it go的博客
05-09 800
1. spoon 界面乱码      修改文件/home/kettle/data-integration/spoon.sh 中JVM参数仍然没有用：    # ****************************************************************** # ** Set java runtime options ...
kettle内存溢出（Java heap space）以及解决方法.docx
02-24
kettle内存溢出（Java heap space）以及解决方法
Kettle之调优
weixin_45102492的博客
05-27 1326
1、调整JVM大小进行性能优化，修改Kettle根目录下的Spoon脚本。 参数 说明 -Xmx2048m 设置JVM最大可用内存为2048M -Xms1024m 设置JVM促使内存为1024m。此值可以设置与-Xmx相同，以避免每次垃圾回收完成后JVM重新分配内存 -Xmn2g 设置年轻代大小为2G。整个JVM内存大小=年轻代大小 + 年老代大小 + 持久代大小。持久代一般固定大小为64m，所以增大年轻代后，将会减小年老代大小。此值对系统性能影响较大，Sun官方推荐配置为整个堆的
Kettle使用配置及常用组件介绍
菜鸟程序员的成长之路
10-13 5879
Kettle使用配置及常用组件介绍
kettle Spoon.bat启动问题
wylszwr的博客
04-22 3844
启动Spoon.bat报错。
Kettle--MySQL生产数据库千万、亿级数据量迁移方案及性能优化
eagle89的专栏
01-06 9176
Kettle 数据量迁移方案及性能优化
kettle优化抽取数据速度_Kettle性能优化
weixin_39626237的博客
12-21 3496
Kettle性能优化是一个系统工程，不仅涉及工具本身的优化，更涉及ETL工具之外的诸多因素，比如，ETL要读取数据库，那么目标DMBS的性能，SQL语句，网络等相关因素都影响到执行效率。根据Kettle对数据ETL的过程性能调优，主要取决于三个因素：上游渠道，工具的大小与数量，下游渠道。一 Kettle调优调整JVM大小进行性能优化，修改Kettle定时任务中的Kitchen或Pan或Spoon脚...
Kettle中执行循环操作时内存溢出的解决方案（贵方法和巧方法）
m0_69586799的博客
06-07 3773
Kettle中执行循环操作时内存溢出的解决方案（贵方法和巧方法）
Kettle闪退打不开的解决办法
weixin_46515057的博客
03-26 3258
kettle闪退解决办法
kettle安装（配置路径+数据库驱动）遇到的小问题
qq_42844688的博客
01-04 3767
1、下载kettle压缩包 2、修改spoon.bat里内存配置： if “%PENTAHO_DI_JAVA_OPTIONS%”=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms1024m" “-Xmx2048m” “-XX:MaxPermSize=256m” 改为： if “%PENTAHO_DI_JAVA_OPTIONS%”=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms512m" “-Xmx1024m” “-XX:MaxPermSize=256m”
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值