Flink 编程实战 - 构建程序框架

最新推荐文章于 2025-05-23 13:14:47 发布

beTree_fc

最新推荐文章于 2025-05-23 13:14:47 发布

阅读量1.3k

点赞数

CC 4.0 BY-SA版权

分类专栏： Flink 文章标签： Flink 编程实践

本文链接：https://blog.youkuaiyun.com/u013560925/article/details/82287744

背景

Flink文档中介绍窗口、水印和触发器等功能偏理论，浏览之后对编程方式懵懵懂懂，故作如下练习，是一个基础Flink编程框架，并不是所有Flink程序都如下程序框架所述。

理解如下代码，需要正确理解Event Time和Watermark，可以浏览《Flink Event Time和WaterMark结合优势分析》博文和《Flink Windows窗口简介和使用》两篇博文。

正文

import org.apache.flink.api.common.functions.MapFunction;
import org.apache.flink.api.java.tuple.Tuple;
import org.apache.flink.api.java.tuple.Tuple2;
import org.apache.flink.streaming.api.TimeCharacteristic;
import org.apache.flink.streaming.api.datastream.DataStream;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;
import org.apache.flink.streaming.api.functions.AssignerWithPeriodicWatermarks;
import org.apache.flink.streaming.api.functions.windowing.WindowFunction;
import org.apache.flink.streaming.api.watermark.Watermark;
import org.apache.flink.streaming.api.windowing.assigners.TumblingEventTimeWindows;
import org.apache.flink.streaming.api.windowing.time.Time;
import org.apache.flink.streaming.api.windowing.windows.TimeWindow;
import org.apache.flink.util.Collector;
 
import java.text.SimpleDateFormat;
import java.util.Comparator;
import java.util.Date;
import java.util.LinkedList;
 

public class WatermarkTest {
    public static void main(String[] args) throws Exception {
 
        //2018/3/3 3:30:0
        Long baseTimestamp = 1520019000000L;