大数据
关注
分享
扫一扫
OUSA
专注、坚持、格局
展开
-
关于windows server 2008环境中kettle无法启动的问题
关于Kettle无法启动的问题，网上给出的大部分解决方案都是修改Spoon.bat / Spoon.sh脚本，主要是修改里面的JVM参数：if "%PENTAHO_DI_JAVA_OPTIONS%"=="" set PENTAHO_DI_JAVA_OPTIONS="-Xms2058m" "-Xmx1024m" "-XX:MaxPermSize=256m"修改为：if "%.原创 2018-11-13 20:11:07 · 2206 阅读 · 1 评论 -
DataX3.0 启动参数说明及优化
查看各个启动参数python datax.py -hjvm参数设置，不可设置太大，不然直接Exceptionpython datax.py --jvm="-Xms1G -Xmx1G" test.json配置动态参数，注意参数名以大写字母D开头python datax.py -p "-Dreader=oraclereader -Dwriter=sqlserve...原创 2019-05-22 09:06:51 · 10511 阅读 · 0 评论 -
count(distinct xxx) 和 group by 做去重隐藏的坑
不说废话，直接上代码。以下查询是基于mysql自带的country,city,countrylanguage三个样例表做的：select count(*) from countryunion all SELECT count(distinct Code, Name, Continent, Region, SurfaceArea, IndepYear, Population, Life...原创 2019-07-11 10:50:43 · 5588 阅读 · 1 评论