qq_31866793的博客

慢慢写~

1，下载官网代码，在本地编译，成功之后，可以看到分为很多个包，我们首先入门得进简单一点的，进入example案例里面2，我们找到经典代码：package org.apache.flink.streaming.examples.wordcount;public class WordCount { // *******************************...

事实上，flink总共提供了三种图的抽象，我们前面已经提到了StreamGraph和JobGraph，还有一种是ExecutionGraph，是用于调度的基本数据结构。上面这张图清晰的给出了flink各个图的工作原理和转换过程。其中最后一个物理执行图并非flink的数据结构，而是程序开始执行后，各个task分布在不同的节点上，所形成的物理上的关系表示。从JobGraph的图里可以看到，数...

1，先找到对应的模块 flink-dist模块：2，我们可以看到很多脚本，全是启动脚本命令因为我们要找启动命令，standalone模式下我们通过start-cluster.sh这个脚本启动，打开看看：#!/usr/bin/env bash####################################################################...

在上一篇我们看到jobmanager的启动类org.apache.flink.runtime.entrypoint.StandaloneSessionClusterEntrypoint来看一下StandaloneSessionClusterEntrypoint启动类的一些重要的方法：--->>>我们先看main方法：ClusterEntrypoint是一...

通过启动脚本已经找到了TaskManager 的启动类org.apache.flink.runtime.taskexecutor.TaskManagerRunner--->>>我们先看它的main方法：调用了runTaskManager方法，启动task manager：启动了taskManagerstart其实是将taskManager...

1，整个Flink的Job启动是通过在Driver端通过用户的Envirement的execute()方法将用户的算子转化成StreamGraph2，然后得到JobGraph通过远程RPC将这个JobGraph提交到JobManager对应的接口3，JobManager转化成executionGraph.deploy()，然后生成TDD发给TaskManager，然后整个Job就启动起来了...

Driver将用户代码转换成streamGraph再转换成Jobgraph后向Jobmanager端提交JobManager启动以后会在Dispatcher.java起来RPC方法submitJob(jobGraph),用于接收来自Driver转化得到的JobGraph来启动任务具体来看jobGraph提交到JobManager的submitJob方法package org.apac...