zggpdd的博客

遇到错误，错误具体如下图所示：Exception in thread “main” java.lang.IllegalStateException: No ExecutorFactory found to execute the application.经过搜索发现，这个错误其实很简单，主要就是因为flink程序执行时的依赖缺少导致的，缺少的依赖时flink-client，引入这个依赖，重新启动就可以了。<dependency> <groupId>or

1 开启checkpoint时：我们需要在数据流创建的时候设置开启自动提交offst至checkpoint，它会自动同步offset到kafka这样设置之后，程序在checkpoint时，如果checkpoint成功， 那么会同步当前checkpoint中的offset至kafka2 关闭checkpoint时:1、如果还想自动提交offset可以在kafka的prop中设置2、如果是自动管理offst你需要自己设置offset的保存位置(redis,zookeeper,mysql)等，

7.了解一下，如何管理kafka的消费的offsetearliest： 当各分区下有已提交的offset时，从提交的offset开始消费；无提交的offset时，从头开始消费latest： 当各分区下有已提交的offset时，从提交的offset开始消费；无提交的offset时，消费新产生的该分区下的数据none： topic各分区都存在已提交的offset时，从offset后开始消费；只要有一个分区不存在已提交的offset，则抛出异常对于offset的设置，目前的我程序是这样一个情况：​ 1.

Kafka命令及相关参数解释由于kafka是去中心化的架构，，所以需要在每台节点上启动kafka，且依赖于zookeeper，需要先启动zookeeper启动kafka:kafka-server-start.sh -daemon /opt/modules/kafka_2.12-2.4.0/config/server.properties-daemon是后台启动的意思创建一个新的topic：kafka-topics.sh --create --zookeeper hadoop01:2181,ha

错误如下Caused by: java.lang.Exception: Could not create actor system at org.apache.flink.runtime.clusterframework.BootstrapTools.startActorSystem(BootstrapTools.java:276) at org.apache.flink.runtime.clusterframework.BootstrapTools.startActorSystem(Bootstra