
Flink
文章平均质量分 86
xiaoxaoyu
小小鱼
展开
-
FlinkWindow和水印
文章目录Flink Window API1、TimeWindow1.1、滚动窗口1.2、滑动窗口(SlidingEventTimeWindows)2、CountWindow2.1、滚动窗口2.2、滑动窗口3、window function4、其它可选API5、窗口起始点的确认时间语义与 Wartermark1、Flink中的时间语义2、EventTime 的引入3、Watermark基本概念4、Watermark 的引入4.1、乱序数据的水印引入4.2、Assigner with periodic wate原创 2021-04-18 13:20:33 · 205 阅读 · 0 评论 -
flink读取kafka数据对数据进行清洗,然后再重新写入kafka
文章目录flink读取kafka数据对数据进行清洗,然后再重新写入kafka1、流水写法2、OOP写法2.1、抽象接口读、写、数据处理2.2、开发人员实现数据源添加和写入某数据平台2.3、用户方针对不同数据实现的特质2.4、执行器,混入特质2.5、动态混入用户的方法,执行flink读取kafka数据对数据进行清洗,然后再重新写入kafka1、流水写法读:设置kafka消费者为flink数据源transform写:设置kafka生产者为flink数据源object FlinkReadWrite原创 2021-04-08 02:36:31 · 1817 阅读 · 0 评论