Flink 编程
文章平均质量分 95
Flink 基础
不二人生
刀光剑影江湖情,摧枯拉朽浪滔滔。功名利禄拂衣去,山高水远路迢迢。一个上得了厅堂下得了厨房、左手写诗右手写词的男人
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
从 Flink 到 Doris 的实时数据写入实践 —— 基于 Flink CDC 构建更实时高效的数据集成链路
Flink-Doris-Connector是连接Apache Flink与Doris数据库的关键组件,支持实时数据同步、维表关联和高效写入。文章详细解析了该连接器的三大应用场景:Scan场景利用分布式架构提升数据同步效率;Lookup Join场景通过异步查询和批处理优化维度表关联;实时ETL场景借助Stream Load实现高效写入并确保Exactly-Once语义。此外,文章还探讨了基于Flink CDC的整库同步方案,解决存量表批量创建、元数据映射和DDL同步等挑战。通过Flink CDC的无锁读取和原创 2025-11-01 08:56:35 · 1150 阅读 · 0 评论 -
Flink编程——最小程序MiniProgram
前面我们介绍了Flink程序的结构,我们是通过一个叫做最小程序的进行说明的,我们之前一直说到Flink 程序的数据流,流说明数据是实时的流动的,那这里的数据有什么格式的要求吗,或者什么样的数据才能流动。DataStream API 得名于特殊的DataStream类,该类用于表示 Flink 程序中的数据集合。你可以认为 它们是可以包含重复项的不可变数据集合。这些数据可以是有界(有限)的,也可以是无界(无限)的,但用于处理它们的API是相同的。DataStream在用法上类似于常规的 Java集合。原创 2024-01-23 10:17:58 · 42981 阅读 · 0 评论 -
Flink编程——基础环境搭建
到这里我们的环境搭建就完成了主要包括准备环境搭建源码环境搭建集群环境搭建。原创 2024-01-22 13:54:05 · 42955 阅读 · 0 评论 -
Flink编程——风险欺诈检测
Apache Flink 提供了 DataStream API 来实现稳定可靠的、有状态的流处理应用程序。Flink 支持对状态和时间的细粒度控制,以此来实现复杂的事件驱动数据处理系统。这个入门指导手册讲述了如何通过 Flink DataStream API 来实现一个有状态流处理程序。原创 2024-01-18 18:09:40 · 42566 阅读 · 0 评论
分享