org.apache.flink.table.api.ValidationException: Expected LocalReferenceExpression. Got: timestamp

原创于 2020-09-24 11:41:51 发布 · 1.9k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#flink

大数据同时被 2 个专栏收录

22 篇文章

订阅专栏

Flink

8 篇文章

订阅专栏

在Apache Flink的处理中，遇到滑动窗口设置的问题，原因为表API缺少事件时间设置。通过修改代码，将事件时间正确地设置为rowtime属性，并调整窗口操作，实现了基于事件时间的滑动窗口计算，对数据进行分组和排名，筛选出排名前几的项。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在这里插入图片描述
情景：在设置滑动窗口时遇到的问题：Expected LocalReferenceExpression. Got: timestamp，详细代码如下：

Table table = tableEnv.fromDataStream(stream);
table
.window(Slide.over(lit(1).hours()).every(lit(5).minutes()).on(($("timestamp").rowtime()).as("ts")).as("w"))
.groupBy($("w"), $("itemId"))
.select($("itemId"), $("itemId").count().as("itemCount"), $("w").end().as("windowEnd"))
.window(Over.partitionBy($("windowEnd")).orderBy($("itemCount").desc()).as("row_num"))
.select($("itemId"), $("itemCount"), $("windowEnd"))
.where($("row_num").between(0, 3));

原因是：需要在定义表设置事件时间，在表API中不能设置事件时间。
原来代码修改为：

Table table = tableEnv.fromDataStream(stream,$("itemId"),$("timestamp").rowtime().as("ts"));
Table tableResult =
       table
       .window(Slide.over(lit(1).hours())
               .every(lit(5).minutes())
               .on($("ts"))
               .as("w"))
       .groupBy($("w"), $("itemId"))
       .select($("itemId"), $("itemId").count().as("itemCount"), $("w").end().as("windowEnd"))
       .window(Over.partitionBy($("windowEnd"))
               .orderBy($("itemCount").desc())
               .as("rank"))
       .select($("itemId"), $("itemCount"), $("windowEnd"))
       .where($("row_num").between(0, 3));