
大数据
文章平均质量分 95
分享大数据学习过程中的相关收货和感悟!
小猪猪家的大猪猪
励志成为数仓工程师的猪
展开
-
【Flink】详解Flink任务提交流程
本文主要介绍Flink的任务提交流程,从源码入手分析Flink如何解析命令行、提取验证有效参数、环境配置参数、程序和用户指定参数如何打包、依赖路径如何获取、客户端模式如何确定以及最后程序的主入口是哪一个原创 2023-07-18 14:25:24 · 1782 阅读 · 0 评论 -
【Flink】Flink时间语义详解
本文首先介绍 Flink 的三种时间语义(Event Time、Processing Time 和 Ingestion Time),然后详细介绍 Flink-watermark 机制。原创 2023-02-15 23:58:55 · 2261 阅读 · 2 评论 -
【Flink】详解JobGraph
本文从源码出发,详细介绍了flink如何对StreamGraph进行优化进而构建JobGraph对象,并在最后给出了自己的总结。原创 2023-02-12 12:35:21 · 962 阅读 · 0 评论 -
【Flink】详解StreamGraph
本文从源码出发,详细分析了StreamGraph的生成以及算子的底层逻辑,包括Transformation和Operator的封装,StreamGraph节点和边生成等。原创 2023-02-01 18:57:59 · 1393 阅读 · 0 评论 -
【Flink】浅谈Flink架构和调度
本文首先详细介绍了Flink运行时架构,包括TaskManager、JobManager,通过画图给出相关实例。最后介绍了Flink的部署模式。原创 2023-01-30 23:22:59 · 1153 阅读 · 0 评论 -
【Flink】详解Flink的八种分区
本文详细介绍乐Flink中分区API以及底层分区器并给出图例,从源码角度分析各个分区器的原理,最后介绍了分区器的使用源码。原创 2023-01-26 21:38:58 · 5398 阅读 · 0 评论 -
【Flink】浅谈Flink背压问题(1)
首先详细介绍了Flink中TM的通信模型和反压机制,接着从例子出发,介绍了Flink中判断反压的两种方式原创 2023-01-19 21:17:42 · 2290 阅读 · 0 评论 -
【分布式】浅谈CAP、BASE理论(1)
详解CAP理论和BASE理论原创 2023-01-11 15:08:08 · 534 阅读 · 0 评论