
hudi
文章平均质量分 91
ImStarBoy
这个作者很懒,什么都没留下…
展开
-
Apache hudi 0.10.1学习笔记之压缩Compaction(下篇)——执行压缩计划
之前的压缩计划生成后,被保存在basePath/.hoodie下的instanttime.compaction.request文件里。 现在可以继续从执行压缩计划的角度进行。同样使用compactor类来提交spark作业,参数里可以带压缩计划对应的instantTime,也可以不带,不带的话则是找到时间最早对应的压缩计划。本文还是以MOR表,经手动异步压缩作为开始。 执行压缩计划部分,需要提前了解下该过程涉及的封装类,例如RunCompactionActionExecutor、各种...原创 2022-04-20 20:37:23 · 4433 阅读 · 0 评论 -
Apache hudi 0.10.1学习笔记之压缩Compaction(上篇)——压缩计划的生成
hudi 学习--压缩计划生成原创 2022-04-19 15:30:28 · 5836 阅读 · 1 评论