kettle数据上传

最新推荐文章于 2025-10-29 10:03:17 发布

原创最新推荐文章于 2025-10-29 10:03:17 发布 · 192 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#服务器 #java #windows

文章讨论了数据库中的字符串处理函数如substr和instr的不同用法，提到了日期格式的正确选择，以及如何优化传输速率，包括调整MySQL配置如useServerPrepStmts和useCompression。同时，还涉及读写操作的性能提升策略，如defaultFetchSize和rewriteBatchedStatements的使用。

1-实际值过大：substr
substr(t4.检验结果 ,0,20) 结果,
————————————————
2、instr函数也有三种情况：

instr(字段,’关键字’)>0相当于字段like ‘%关键字%’

instr(字段,’关键字’)=1相当于字段like ‘关键字%’

instr(字段,’关键字’)=0相当于字段not like ‘%关键字%’
————————————————
3、日期格式不对
字段选择元数据，选择类型以及格式
————————————————
4、传输速率过慢
输入表：选项加入
（1）增加读操作
useServerPrepStmts：true
cachePrepStmts：true
（2）读取缓存，设置过高消耗内存也会高
defaultFetchSize：10000
useCursorFetch：true
（3）压缩数据传入，与mysql服务端进行通信时采用压缩
useCompression:true

目标表：选项加入
defaultFetchSize:5000
（1）提高写的操作
rewriteBatchedStatements:true
useServerPrepStmts:false
useCursorFetch:true
（2）设置与mysql服务器通讯时压缩数据传入
useCompression:true
————————————————

to_char(t.入院日期,'yyyy-mm-dd hh24:mm:ss') 入院时间,
to_char(t.出院日期,'yyyy-mm-dd hh24:mm:ss') 出院时间,
————————————————