
SQL
文章平均质量分 86
wangfann
这个作者很懒,什么都没留下…
展开
-
udaf开发小结
udaf开发小结原创 2022-06-30 19:42:35 · 732 阅读 · 1 评论 -
使用groupingsets函数优化数仓离线计算性能表现、原理分析及避坑指南
1.上线该优化后任务性能表现任务执行时长:任务一:该任务为wps_android国内应用的天任务耗时截图,执行时长缩短3-4倍。该任务是天任务中最长的任务,也就是说以现在的任务流程部署情况,整体天任务执行时长缩短3倍以上。任务二:该任务为国内应用的周任务耗时截图,执行时长缩短3-4倍。任务三:该任务为数仓单个子任务中耗时最长的任务(30天活跃任务),执行时间缩短5-6倍。其中任务的执行时间包括执行hive sql查询的时间+数据写入RDS的时间。任务四:该任务为数仓月任务..原创 2022-02-28 16:32:13 · 2223 阅读 · 0 评论