
flink
文章平均质量分 65
flink
Called_Kingsley
想当摄影师的一个大数据工程师
展开
-
Flinksql kafka connector连接失败 Could not find any factory for identifier ‘kafka‘ that implements
问题测试flink sql连接kafka, 启动 sql-client.sh之后,想要建立一张kafka的表CREATE TABLE pageviews_per_region ( id STRING, name string, age string, address string) WITH ( 'connector' = 'kafka', 'topic' = 'canal_cdc', 'properties.bootstrap.servers' = 'xxx.xx.x.x原创 2022-03-30 12:19:30 · 3150 阅读 · 0 评论 -
Flink任务 checkPoint失败 问题排查记录
背景公司有一个实时报表项目,需要使用到flink来进行处理。处理逻辑大概如下:需要使用canal监控多张表,然后进行一些复杂计算。程序设置flink程序代码里面设置了 checkPoint和自动重启机制//checkpoint配置env.enableCheckpointing(300000);env.getCheckpointConfig().setCheckpointingMode(CheckpointingMode.EXACTLY_ONCE);env.getCheckpointConf原创 2021-06-17 15:40:33 · 11002 阅读 · 9 评论