Flink SQL - OVER windows‘ ordering in stream mode must be defined on a time attribute.

最新推荐文章于 2025-03-27 00:45:00 发布

这都不是事er

最新推荐文章于 2025-03-27 00:45:00 发布

阅读量4.3k

点赞数 2

分类专栏： Flink 文章标签： flink sql windows

本文链接：https://blog.youkuaiyun.com/sinat_25528181/article/details/120994023

版权

Flink 专栏收录该内容

7 篇文章

订阅专栏

本文介绍了在Flink SQL中使用窗口函数和OVER子句进行数据处理的问题。通过示例代码展示了如何创建带有水印的时间窗口表，并执行复杂的窗口聚合查询，包括最大值和最小值的计算。同时提供了Flink官方文档链接作为参考，帮助理解窗口和OVER子句的用法。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

OVER windows' ordering in stream mode must be defined on a time attribute.

看着网上flink sql的帖子较少，刚才这个问题查了好久，现在贴下完整源码。

这个报错，是建表的时候需要指定时间语义的字段，WATERMARK 是必须的

package com.z.demo

import org.apache.flink.table.api._

/**
 * @Author wenz.ma
 * @Date 2021/10/27 15:17
 * @Desc
 */
object SqlOverRows02 {
  def main(args: Array[String]): Unit = {
    val settings = EnvironmentSettings.newInstance().inStreamingMode().build()
    val tEnv = TableEnvironment.create(settings)

    tEnv.executeSql(
      """
        |create table projects(
        |id int,
        |name string,
        |score double,
        |load_date timestamp(3),
        |WATERMARK FOR load_date AS load_date - INTERVAL '1' MINUTE
        |)with(
        |'connector' = 'kafka',
        |'topic' = 'test-topic',
        |'properties.bootstrap.servers' = 'server120:9092',
        |'properties.group.id' = 'testGroup',
        |'scan.startup.mode' = 'latest-offset',
        |'format' = 'csv'
        |)
        |""".stripMargin)
    tEnv.executeSql(
      """
        |select
        | name,
        | max(score)
        |   over(partition by name
        |     order by load_date
        |     RANGE BETWEEN INTERVAL '10' SECOND PRECEDING AND CURRENT ROW )max_score,
        | min(score)
        |   over(partition by name
        |     order by load_date
        |     RANGE BETWEEN INTERVAL '10' SECOND PRECEDING AND CURRENT ROW )min_score,
        | current_time
        | from
        | projects
        |""".stripMargin).print()
  }
}