【Flink】 java.lang.NoClassDefFoundError: org/apache/kafka/common/serialization/ByteArrayDeserializer

一杯咖啡半杯糖

已于 2022-12-07 17:27:50 修改

阅读量2.9k

点赞数

分类专栏： Flink实战文章标签： kafka java flink

于 2021-12-13 17:17:33 首次发布

本文链接：https://blog.youkuaiyun.com/sinat_23225111/article/details/121909026

版权

Flink实战专栏收录该内容

95 篇文章 ¥19.90 ¥99.00

订阅专栏

超级会员免费看

在使用自研的flinsql提交平台通过Flink客户端向YARN提交flinksql时遇到java.lang.NoClassDefFoundError异常，错误指向org/apache/kafka/common/serialization/ByteArrayDeserializer。解决方法包括：1) 下载并添加kafka-clients包到flink客户端lib目录；2) 使用带有kafka依赖的flink-sql-connector-kafka_2.11-1.13.3.jar替换原有flink-connector-kafka_2.11-1.13.3.jar，上传到lib目录，问题即可解决。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

自研flinsql提交平台，在服务器上新安装了一个flink客户端，准备提交flinksql到yarn，执行测试的时候报错


/data/flink/flink-1.13.3/bin/flink run -p 1  -ynm flink@547116966402719744  -yd -m yarn-cluster   -yqu root.default -c com.huize.beidou.realtime.streaming.core.JobApplication /home/it/beidou_realtime/flink-streaming-core.jar -sql /home/it/beidou_realtime/sql/job_sql_54.sql  -type 0
Setting HBASE_CONF_DIR=/etc/hbase/conf because no HBASE_CONF_DIR was set.
SLF4J: Class path contains multiple SLF4J bindings.
SLF4J: Found binding in [jar:file:/data/flink/flink-1.13.3/lib/log4j-slf4j-impl-2.12.1.jar!/org/slf4j/impl/StaticLoggerBinder.class]
SLF4J: Found binding in [jar:file:/opt/cloudera/parcels/CDH-5.16.2-1.cdh5.16.2.p0.8/jars/slf4j-log4j12-1.7.5.jar!/org/slf4j/impl/StaticLoggerBinder