解决Flink SQL connector 连接 kafka 时报Could not find a suitable table factory的错

wx_start_ag

于 2021-07-30 16:25:19 发布

阅读量2.3k

点赞数

CC 4.0 BY-SA版权

文章标签： flink 大数据实时大数据

本文链接：https://blog.youkuaiyun.com/wx_start_ag/article/details/119250430

本文探讨了在使用Apache Flink 1.13.0处理Kafka数据时，如何解决TableEnvironment创建Table时遇到的TableFactory匹配问题。重点在于理解connector.type配置错误导致的异常，并提供了解决方案，包括调整Kafka连接器版本和检查配置一致性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

环境

jdk 1.8
scala 2.11.8
flink: 当前最新版本1.13.0
kafka 2.4.1

执行代码

   val bsSettings = EnvironmentSettings.newInstance().useBlinkPlanner().inStreamingMode().build()
    val bsTableEnv = TableEnvironment.create(bsSettings)

    val kafkaSchema = new Schema()
      .field("id", DataTypes.INT())
      .field("name", DataTypes.STRING())
      .field("age", DataTypes.BIGINT())

    bsTableEnv.connect(
      new Kafka()
        .version("2.4.1")
        .topic("test")
        .property("zookeeper.connect", "192.168.100.130:2181")
        .property("bootstrap.servers", "192.168.100.130:9092")
        .property("connector.type ","kafka")
        .property("parallelism","1")
    )
      .withFormat(new Csv().fieldDelimiter('|').deriveSchema())
//      .withFormat(new Json())
      .withSchema(kafkaSchema)
      .inAppendMode()
      .createTemporaryTable("kafkaInputTable")

    bsTableEnv.from("kafkaInputTable").execute().print()