- 博客(3)
- 收藏
- 关注
原创 idea连接KafKa 生产者发送csv数据至topic
/ 使用逗号连接数组元素为字符串。// 读取第一行后,将标志位设置为false。// 标志位,用于检查是否为第一行。// 跳过当前循环的剩余部分。// 用于计数发送的数据条数。// 处理每一行数据,这里直接转换为字符串发送。// Kafka生产者配置。// 要读取的目录路径。这里填配置的主机地址,后面不用改。
2024-12-30 10:16:42
946
1
原创 Flink 运行报错 recovery is suppressed by ...
将代码中分成多个文件运行例如运行文件FlinkConsumer有10个DataStream流,分配给FlinkConsumer1、FlinkConsumer2、FlinkConsumer3等三个文件。在代码中添加并行度设置,建议和搭建的Flink集群配置文件中设置的资源一致。再建立一个FlinkRun文件多线程运行这些文件代码如下。// 创建线程来运行每个Flink消费者的main方法。原因:代码中数据流太多了,没有可用资源了。①方法一:设置并行度。②方法二:多线程运行。
2024-12-30 10:03:41
471
原创 Flink 设定事件时间窗口没结果
解决:在设定水印策略时设置空闲时长指定在没有新事件到达时,源函数(source function)可以空闲的最长时间。
2024-12-30 09:36:49
333
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅