<?xml version="1.0" encoding="utf-8" ?><rss version="2.0"><channel><title><![CDATA[qq75970138的博客]]></title><description><![CDATA[]]></description><link>https://blog.youkuaiyun.com/qq75970138</link><language>zh-cn</language><generator>https://blog.youkuaiyun.com/</generator><copyright><![CDATA[Copyright &copy; qq75970138]]></copyright><item><title><![CDATA[flink sql checkpoint的设置]]></title><link>https://blog.youkuaiyun.com/qq75970138/article/details/149718301</link><guid>https://blog.youkuaiyun.com/qq75970138/article/details/149718301</guid><author>qq75970138</author><pubDate>Mon, 28 Jul 2025 15:50:51 +0800</pubDate><description><![CDATA[- 显式设置，确保覆盖默认值。'properties.auto.offset.reset' = 'earliest'  -- 后备策略。：可能默认启用 Checkpoint（如间隔 30 秒），并配置持久化存储（如 HDFS/S3）。：StreamPark 的管理员可能设置了集群级或环境级的默认 Checkpoint 参数。，依赖 Kafka 自身的偏移量提交（但这不是 Flink Checkpoint）。模板），模板中可能预定义了 Checkpoint 配置。（默认），重启后从最新偏移量开始，]]></description><category></category></item><item><title><![CDATA[doris sql 优化]]></title><link>https://blog.youkuaiyun.com/qq75970138/article/details/146375288</link><guid>https://blog.youkuaiyun.com/qq75970138/article/details/146375288</guid><author>qq75970138</author><pubDate>Wed, 19 Mar 2025 17:10:42 +0800</pubDate><description><![CDATA[以上代码中的字段tag_value_array的值的格式是['a','b','c'.....]，使用到json 的解析函数会很慢，推荐使用替换函数，把 [，]，双引号替换成空，再用explode_split，如下图所示。1.尽量少用结构字符串的函数，比如parse_url，explode_json_array_string等等。2.join小表的条件有or的情况下建议join多次小表。$ptmcTable 是小表，可以改成。3.根据业务提前缩小结果集。]]></description><category></category></item><item><title><![CDATA[shell脚本防止被重复调用]]></title><link>https://blog.youkuaiyun.com/qq75970138/article/details/140107077</link><guid>https://blog.youkuaiyun.com/qq75970138/article/details/140107077</guid><author>qq75970138</author><pubDate>Mon, 01 Jul 2024 17:58:16 +0800</pubDate><description><![CDATA[echo "程序正在运行，不要重复执行"]]></description><category></category></item><item><title><![CDATA[spark-streaming从kafka读数据写入doris出现OOM的问题]]></title><link>https://blog.youkuaiyun.com/qq75970138/article/details/133350565</link><guid>https://blog.youkuaiyun.com/qq75970138/article/details/133350565</guid><author>qq75970138</author><pubDate>Wed, 27 Sep 2023 14:35:32 +0800</pubDate><description><![CDATA[原因是sparkConf的时候忘记写几个配置。scala版本 2.11.8。spark版本 2.1.0。]]></description><category></category></item></channel></rss>