Flink 学习概述
- flink概述:
从flink的特点、使用场景、作用、架构、运行模型等方面先有一个整体的认识。即它是什么、能做哪些事,怎么做的。
- flink运维安装:
集群模式有哪些、集群搭建、flink高可用原理等
- flink的编程模型、相关原理
flink的编程模型:编程接口、程序结构、数据类型:类型支持与typeinformation获取。
- flink datastream
编程模型、时间概念与水印、窗口计算、作业链和资源组、异步操作。
api中主要有输入源、转换算子、数据输出等api的操作。
窗口计算的原理
多流合并的原理
- flink sql和table api的操作
sql与table api的关系
常见场景下的sql使用等
自定义函数
connector
- flink的状态管理
对于一些任务,比如join、聚合或者是去重等操作需要flink保存状态来实现相关语义。对于flink的状态管理有如下几个方面:
有状态计算的原理是什么
checkpoint和savepoint
状态管理区
querable state
- flink监控与性能优化
监控指标
反压的监控与优化
checkpoint的监控与优化
Flink内存优化:flink内存配置、Network Buffers的配置