1、前言
前面2部分主要是介绍以下2点:
- flink sql整体的执行流程大致为:sqlNode --> Operation --> RelNode --> 优化 --> execNode --> Transformation。
- 以及flink sql源码解析需要使用到的java spi。
现在具体来看看flink sql 在其内部转换的实现步骤,就是如何去调用连接器,主要是在sqlNode --> RelNode这一步。

当执行建表语句,主要是进行语法的校验。真正把输入源、输出源连接在一起执行的,还是通过insert语句。即当我们在定义输入表或者输出表,有错误的定义connecter='abc',也不会在执行建表语句时返回错误,而是在执行插入语句时报错。这里以一份简单的代码为例:
def main(args: Array[String]): Unit

本文详细介绍了Flink SQL的执行流程,从sqlNode到RelNode的转化,重点讨论如何调用连接器。通过示例代码展示了建表和插入操作,强调了错误的连接器定义会在插入语句时才报错。同时,解释了处理时间和事件时间的概念,并使用HOP函数进行窗口聚合。
最低0.47元/天 解锁文章
392

被折叠的 条评论
为什么被折叠?



