FLINK JDBC SQL Connector遇到的类型转换问题

最新推荐文章于 2024-06-16 20:55:17 发布

原创

最新推荐文章于 2024-06-16 20:55:17 发布 · 4.7k 阅读

2 ·

CC 4.0 BY-SA版权

文章标签：

#大数据 #big data #flink

本文介绍了在使用Flink SQL时遇到的类型转换异常，即尝试将Integer转换为Long导致的ClassCastException。问题源于MySQL的INTUNSIGNED字段在Flink中被错误地映射为INT而非BIGINT。解决方案是确保MySQL INTUNSIGNED字段在Flink中映射为BIGINT。此外，博客还强调了正确理解Flink与MySQL类型映射的重要性。

背景

Flink 1.3
最近在写Flink Sql的时候，遇到了java.lang.ClassCastException: java.lang.Integer cannot be cast to java.lang.Long 问题

分析

直接上报错的sql，如下：

CREATE TABLE `xxx` (
  `merchantId`  BIGINT,
  `userId`  BIGINT,
  `status`  BIGINT
) WITH (
  
);

具体的问题堆栈如下：

java.lang.ClassCastException: java.lang.Integer cannot be cast to java.lang.Long
	at org.apache.flink.table.data.GenericRowData.getLong(GenericRowData.java:154)
	at JoinTableFuncCollector$9.collect(Unknown Source)
	at org.apache.flink.table.runtime.collector.WrappingCollector.outputResult(WrappingCollector.java:39)
	at LookupFunction$4$TableFunctionResultConverterCollector$2.collect(Unknown Source)
	at org.apache.flink.table.functions.TableFunction.collect(TableFunction.java:196)
	at org.apache.flink.connector.jdbc.table.JdbcRowDataLookupFunction.eval(JdbcRowDataLookupFunction.java:175)
	at LookupFunction$4.flatMap(Unknown Source)
	at org.apache.flink.table.runtime.operators.join.lookup.LookupJoinRunner.processElement(LookupJoinRunner.java:81)
	at org.apache.flink.table.runtime.operators.join.lookup.LookupJoinRunner.processElement(LookupJoinRunner.java:34)
	at org.apache.flink.streaming.api.operators.ProcessOperator.processElement(ProcessOperator.java:66)
	at org.apache.flink.streaming.runtime.tasks.CopyingChainingOutput.p