Flink的Table API和Flink SQL

本文详细介绍了Flink的Table API和SQL的使用,包括基本程序结构、表的创建和查询、DataStream与Table的转换、时间特性和窗口操作等,涵盖了从数据输入到输出的完整流程。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

基本程序结构

Table API 和 SQL 的程序结构,与流式处理的程序结构十分类似

val tableEnv=。。。 // 创建表的执行环境
// 创建一张表,用于读取数据
tableEnv.connect(...).createTemporaryTable("inputTable") 
// 注册一张表,用于把计算结果输出
tableEnv.connect(...).createTemporaryTable("outputTable")
// 通过 Table API 查询算子,得到一张结果表
val result=tableEnv.from("inputTable").select(...)
// 通过 SQL查询语句,得到一张结果表
val sqlResult=tableEnv.sqlQuery("select ... from ...")
// 将结果表写入输出表
result.insertInto("outputTable")
  • TableEnvironment 可以注册目录 Catalog,并可以基于 Catalog 注册表
  • 表(Table)是由一个“标识符”(identifier)来指定的,由3部分组成:Catalog名、数据库(database)名和对象名
  • 表可以是常规的,也可以是虚拟的(视图,View)
  • 常规表(Table)一般可以用来描述外部数据,比如文件、数据库表或消息队列的数据,也可以直接从 DataStream转换而来
  • 视图(View)可以从现有的表中创建,通常是 table API 或者 SQL 查询的一个结果集
创建表

TableEnvironment 可以调用 .connect() 方法,连接外部系统,并调用 .createTemporaryTable() 方法,在 Ca

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值