- 博客(2)
- 收藏
- 关注
原创 Flink 窗口 概述
Flink是一种流式计算引擎,主要是来处理无界数据流的,数据源源不断、无穷无尽。想要更加方便高效地处理无界流,一种方式就是将无限数据切割成有限的“数据块”进行处理,这就是所谓的“窗口”(Window)。【把窗口理解成一个“桶”,Flink则可以把流切割成大小有限的“储存桶”,把数据分发到不同的桶里,当窗口结束,就对每一个桶的数据进行收集处理】原理:建立一个窗口,在固定的额时间段内不断收集数据,到达结束时间的时候窗口结束收集数据,生成结果,窗口销毁。
2024-05-20 12:17:24
1288
原创 在IDEA上使用Flink 无法消费Kafka 【一段时间后报错:TimeoutException: Timed out waiting for a node assignment. Call: d】
记录自己在学习Flink中遇到一个问题,在IDEA上写Flink消费者,想要消费Kafka,可是在Kafka生产者模式下生产数据却无法正常被消费确认了消费Kafka的服务器参数(setBootstrapServers),和消费主题(setTopics)无误后确认了zookeeper和kafka已经开启
2024-05-12 19:55:45
903
6
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人