解决Exception in thread "main" java.lang.NoClassDefFoundError: kafka/serializer/StringDecoder

最新推荐文章于 2022-12-22 22:00:30 发布
最新推荐文章于 2022-12-22 22:00:30 发布
阅读量3.3k 收藏 7
点赞数 3
分类专栏： hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/qq_36329973/article/details/104716606
版权

问题出现在Spark Streaming连Kafka的Jar包上传到服务器用spark-submit运行的时候：

如果在本地环境能够运行而去服务器报错，大概率原因是缺少两个jar包

kafka_2.11-0.8.2.1.jar和metrics-core-2.2.0.jar

jar包版本已你自己的为准，可以在IDEA你的项目里搜索（双击Shift开启全局搜索）这两个Jar包，上传到$SPARK_HOME/libs文件夹中再运行即可。

手把手教程：

以metrics-core-2.2.0.jar为例：

然后找到它右键Show in Explorer即可找到该jar包，之后上传到服务器即可。

 

第99课：使用Spark Streaming+Kafka实战对论坛网站动态行为的多维度分析及java.lang.NoClassDefFoundError问题解决完整内幕版本解密
段智华的博客
05-08 8450
第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析 /* 王家林老师授课http://weibo.com/ilovepains  每天晚上20：00YY频道现场授课频道68917580*/ /**  * *第99课：使用Spark Streaming 实战对论坛网站动态行为的多维度分析  * 论坛数据自动生成代码，该生成的数据会作为Producer的方式发送给
第91课：SparkStreaming基于Kafka Direct案例实战和内幕源码解密 java.lang.ClassNotFoundException 踩坑解决问题详细内幕版本
热门推荐
段智华的博客
04-30 4万+
第91课：SparkStreaming基于Kafka Direct案例实战和内幕源码解密    1.启动hdfs 2启动spark   3启动zookeeper root@worker2:~# zkServer.sh start JMX enabled by default Using config: /usr/local/zookeeper-3.4.6/bin/.
Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/spark/internal/Logging$class
weixin_45030023的博客
09-23 1415
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/spark/internal/Logging$class at io.github.interestinglab.waterdrop.Waterdrop$.<init>(Waterdrop.scala:21) at io.github.interestinglab.waterdrop.Waterdrop$.<clinit>(Waterdrop
Exception in thread "main" java.lang.NoClassDefFoundError: kafka/serializer/StringDecoder
weixin_30384217的博客
12-14 600
提交spark任务报错：Exception in thread "main" java.lang.NoClassDefFoundError: kafka/serializer/StringDecoder 解决：maven依赖中去掉provided标签。打包会一起打 转载于:https://www.cnblogs.com/huiandong/p/10118440.html...
selenium不同版本jar报错：Exception in thread "main" java.lang.NoClassDefFoundError
七号空间
08-14 9389
使用selenium时，一个很简单的小程序，在运行时一直报错，网上搜索了一下，并没有找到解决的方案，可能遇到这种问题的人比较少吧，但解决这个问题花废了一天多的时间，一直没有找到解决的原因，很是头疼； 这段代码之前是就有的，但是现在报错了，之所以是把它拿出来，是为了比较现有的一个项目，一直在报错，找不到原因，就拿出最初的代码做比较，用来发现问题，排除其他的原因找问题，这个方法还是挺好用的   ...
Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/kafka/common/..
啊晨
07-20 5310
问题 在idea编写的spark直连Kafka任务，运行时报错： Spark fails with NoClassDefFoundError for org.apache.kafka.common.serialization.StringDeserializer 解决方法 版本不一致导致，导入dependencies.jar.或者版本更改一致即可 ...
Exception in thread "main" java.lang.NoClassDefFoundError
yuduoduo的专栏
06-27 4952
错误：Exception   in   thread   "main"   java.lang.NoClassDefFoundError 症状：eclipse中的相关项目根节点有个红叉描述：我出现这个异常是在使用eclipse时，和一般出现在java cmd出现的问题还不太一样。我利用IDE生成类，生成main方法，结果一运行。出了Exception   in   thread   "ma
Kafka生产者和消费者（Java代码案例）
shan286的专栏
04-07 2147
话不多说，直接上代码，在运行之前请配置好本地生产环境，具体也可以参照我上一篇博客，链接在此： （一）生产者代码： Properties props = new Properties(); props.put("bootstrap.servers", "localhost:9092"); props.put("acks", "all"); props.put("retries", 0); pr...
安装部署（六） Kafka集群安装部署以及Producer和Consumer的JAVA代码测试
星门学派（Star School）
08-11 8002
Kafka集群安装部署以及Producer和Consumer的JAVA代码测试 kafka 0.10.0.0 ubuntu 14.04.04 x64 hadoop 2.7.2 spark 2.0.0 zookeeper 3的集群安装参考spark安装部署中的相应部分。 1、下载 二进制包 https://www.apache.org/dyn/closer.cgi?p
利用Kafka发送/消费消息-Java示例
博观约取
08-25 2万+
利用Kafka发送/消费消息-Java示例当使用命令行工具把基本的组件运行起来后，再使用Java client就很简单，这里是入门的第一个Java客户端程序，有很多需要深入理解的地方。依赖配置 <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka_2.11</
运行错误：Exception in thread "main" java.lang. NoClassDefFoundError: org/apache/commons/logging/LogFac
NCHUtianlin的博客
11-28 9216
错误提示项目中没有日志相关的类，原因是这个项目并没有引入相关的JAR包 因此，我引入commons-logging-1.2.jar之后，运行正常 如果Spring项目中只是进行IOC（控制反转）和DI（依赖注入），那么，引入以上三个JAR即可：commons-logging 、 spring-beans 、 spring-core ，三个缺一不可。 ...
spark submit提交任务报错Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/spark/stream
小蚯蚓的博客
09-25 9334
1.问题描述 提交spark任务： bin/spark-submit --master local[2] \ --class _0924MoocProject.ImoocStatStreamingApp_product \ /opt/datas/project/scalaProjectMaven.jar \ bigdata.ibeifeng.com:2181/kafka08 test str...
kafka启动报错 Exception in thread “main“ java.lang.UnsupportedClassVersionError: kafka/Kafka
weixin_41762839的博客
09-16 1124
kafka启动报错 Exception in thread "main" java.lang.UnsupportedClassVersionError: kafka/Kafka : Unsupported major.minor version 52.0 原因： java版本过低 java版本为1.7.x，kafka版本需要1.8.x 解决办法： 升级jdk版本为1.8.x，完美解决 ...
错误：Exception in thread "main" java.lang.NoClassDefFoundError
牛哞哞杂记
03-24 1158
错误三： Exception in thread “main” java.lang.NoClassDefFoundError: org/springframework/beans/factory/BeanFactory at java.lang.Class.getDeclaredMethods0(Native Method) at java.lang.Class.privateGetDeclare...
kafka报错：java.lang.NoClassDefFoundError: org/apache/kafka/common/serialization/StringDeserializer
WGBLW的博客
04-26 6062
kafka报错：java.lang.NoClassDefFoundError: org/apache/kafka/common/serialization/StringDeserializer
Exception in thread “main“ java.lang.NoClassDefFoundError
m0_70905607的博客
12-22 7196
验证继承情况下子类创建对象时，先调用父类的构造方法，再调用子类的构造方法。
Java运行错误：Exception in thread "main" java.lang.NoClassDefFoundError
康荣龙的一亩三分地儿
12-21 5392
问题发现：一直都在Eclipse中运行程序，没什么问题。今天有个小测试程序在命令行执行，javac test.java后生成test.class字节码文件没有问题，但是java test时报出Exception in thread "main" java.lang.NoClassDefFoundError错误。（注意不是java test.class，java java.class肯定不正确，也报
java.lang.NoClassDefFoundError: storm/kafka/BrokerHosts
zhc794429974的博客
09-27 1596
在跑storm-kafka的例子中，报出 java.lang.NoClassDefFoundError: storm/kafka/BrokerHosts Exception in thread "main" java.lang.NoClassDefFoundError: storm/kafka/BrokerHosts at java.lang.Class.getDeclaredMet...
Exception in thread “main“ java.lang.NoClassDefFoundError: org/apache/flink/api/common/typeinfo/Type
程序员五哥
12-07 1763
运行Scala代码时报错为： 度娘了不少，基本都说是idea中引用的Scala版本与电脑安装的Scala版本不一致导致的，但我查看了不是这个原因，我的这两者是一样的，都是scala.2.11.8 ，随后忘了在哪个地方看到的解决方法为： 如图所示打钩后再运行就没问题了。 ...
Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/xmlbeans/XmlException
最新发布
09-21
引用:Exception in thread main java.lang.NoClassDefFoundError：org/apache/axis2/client/Stub 。 引用:Exception in thread main java.lang.NoClassDefFoundError：javax/mail/internet/ParseException 。 引用: org.apache.spark spark-sql_2.11 ${spark.jar.version} compile 在一个maven项目中，如果存在编译需要而发布不需要的jar包，可以用scope标签，值设为provided。如下： javax.servlet.jsp jsp-api。 Exception in thread "main" java.lang.NoClassDefFoundError: org/apache/xmlbeans/XmlException 是指在主线程中发生了一个异常，该异常是由于找不到org/apache/xmlbeans/XmlException类而引起的。这个异常通常是由于缺少相关的jar包或者在编译时没有正确导入相关的类所致。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值