Sen的博客

文章目录flink 任务运行中出现的错误一、flink 维护状态变量出现走过的弯路：1、flink 维护状态变量有三种方式：<1>、MemoryStateBackend<2>、FsStateBackend<3>、RocksDBStateBackend2、出现的错误：<1>:当使用 FsStateBackend 的时候出现的错误 如下图：错误如下：&l...

文章目录flink on yarnFlink on Yarn的两种运行方式第一种【yarn-session.sh(开辟资源)+flink run(提交任务)】/bin/yarn-session.sh 命令分析：第二种【flink run -m yarn-cluster(开辟资源+提交任务)】/bin/flink run 命令分析：Flink在YARN上的恢复行为flink on yarnFli...

在流计算中，我们一般会选择 Storm、Spark、Flink 等计算框架，而对消息队列的选则一般是Rabbitmq、Kafka 等，本片文章我们主要介绍 Kafka + Flink 框架在流计算中所遇到的问题及解决方案。 先聊下一个很古老的问题，Flink 消费Kafka中的数据，Kafka 有好几个分区，而如何保证Flink按顺序消费呢？（说详细一点儿：假设...