FLink中处理时间和事件时间的滚动窗口

原创

已于 2024-02-04 19:28:07 修改 · 801 阅读

4 ·

CC 4.0 BY-SA版权

文章标签：

#flink #大数据

于 2024-02-03 21:15:12 首次发布

滚动窗口 (Tumbling Windows)

滚动窗口原理

滚动窗口分配器将每个元素分配到一个指定窗口大小的窗口中
滚动窗口有一个固定的大小，并且窗口不会出现重叠，即数据也不会重复

滚动窗口特点

时间对齐
窗口长度固定
没有重叠
滚动窗口场景
适合做BI统计等，(做每个时间段 / 计算内的聚合计算 )
每个时间段 / 计算呢你的Top-N
滚动窗口图示如下：

处理时间滚动窗口案例

package 复习
import org.apache.flink.streaming.api.scala.StreamExecutionEnvironment
import org.apache.flink.api.scala._
import org.apache.flink.streaming.api.scala.function.ProcessWindowFunction
import org.apache.flink.streaming.api.windowing.assigners.TumblingProcessingTimeWindows
import org.apache.flink.streaming.api.windowing.time.Time
import org.apache.flink.streaming.api.windowing.windows.TimeWindow
import org.apache.flink.util.Collector
/*
数据类型
2022-11-21 beijing 1