
Flink & DolphinScheduler
Flink原理、实践、源码分享
ErbaoLiu
计算数学 本硕
展开
-
Flink术语表(Glossary)
原文链接Flink Application Cluster Flink应用程序集群是一个专用的Flink集群(Flink Cluster),它只执行一个Flink作业。Flink集群的生存期与Flink作业的生存期绑定。以前的Flink应用程序集群也称为作业模式下的Flink集群。与Flink会话集群相比。Flink Cluster 由一个Flink主进程(Flink Master)和一个或多个Flink TaskManager进程组成的分布式系统。...翻译 2020-06-17 15:02:02 · 593 阅读 · 0 评论 -
Flink分布式运行环境(Distributed Runtime Environment)
目录任务和操作算子链(Tasks and Operator Chains)作业管理器、任务管理器和客户端(Job Managers, Task Managers, Clients)任务槽和资源(Task Slots and Resources)状态后端(State Backends)保存点(Savepoints)原文链接任务和操作算子链(Tasks and Operator Chains) 对于分布式执行,Flink将操作算子子任务(operator subta...翻译 2020-06-17 14:37:07 · 581 阅读 · 0 评论 -
Flink数据流编程模型(Dataflow Programming Model)
抽象层次(Levels of Abstraction) Flink提供了不同层次的抽象来开发流/批处理(streaming/batch)应用程序。如下:抽象级别从低到高依次是:Stateful Stream Processing —> DataStream/DataSet API —> Table API —> SQL。(1)Stateful Stream Processing 它是整个抽象的最底层,通过过程函数(Process Fun...翻译 2020-06-16 16:35:45 · 1674 阅读 · 0 评论