Spark提交任务提示 com.mysql.jdbc.Driver Class not found

最新推荐文章于 2022-05-16 11:15:45 发布

weixin_34363171

最新推荐文章于 2022-05-16 11:15:45 发布

阅读量825

点赞数

文章标签：大数据数据库 java

本文介绍了解决com.mysql.jdbc.DriverNotFound错误的方法。该错误通常发生在尝试连接MySQL数据库但未正确配置Spark提交命令时。文章详细解释了如何通过在spark-submit命令中添加正确的MySQL连接器JAR包来解决此问题。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

com.mysql.jdbc.Driver Not Found

提示很奇怪，在sbt文件中已经引用了，编译也没有问题：

 "mysql" % "mysql-connector-java" % "5.1.33"

原因

spark-submit的时候没有提交对应jar，应该填上，如下：

--packages "mysql:mysql-connector-java:5.1.33"

非spark的jar包，都要写在这里。

关注博主即可阅读全文

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

weixin_34363171

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH

weixin_43616627的博客

01-13

4397

The specified datastore driver (“com.mysql.jdbc.Driver”) was not found in the CLASSPATH. Please check your CLASSPATH specification, and the name of the driver已解决要执行的代码如下： object HiveRead { def mai...

spark-submit以集群方式提交应用报错：Exception in thread "main" java.sql.SQLException: No suitable driver

GulfMoon

05-15

1781

一、问题背景因现场项目临近上线，在现场测试环境部署后台程序时候出现各种奇怪的问题，这些都是在公司内部测试环境都没有遇到过的，很有记录下来的必要。 Spark应用程序的主要业务逻辑是将MySQL中表数据全量同步到Spark中，以yarn-client模式提交执行报错： Exception in thread "main" java.sql.SQLException: No suitable ...

参与评论您还未登录，请先登录后发表或查看评论

spark java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

piaodexin的博客

08-12

4107

在用spark连接mysql数据库时出现java.lang.ClassNotFoundException: com.mysql.jdbc.Driver报错，可以通过设置–driver-class-path /path/mysql-connector-java-5.1.46.jar来完美解决 /home/hadoop/spark/spark-2.4.0-bin-hadoop2.7/bin/spar...

Spark报错：ClassNotFoundException: com.mysql.jdbc.Driver和Public Key Retrieval is not allowed

zhengzaifeidelushang的博客

05-16

1172

Spark报错：ClassNotFoundException: com.mysql.jdbc.Driver和Public Key Retrieval is not allowed 执行下面这条往mysql数据库插入数据的语句，触发了下面两条错误： data_df.write.jdbc(url,tablename,'append', prop) 错误一： ClassNotFoundException: com.mysql.jdbc.Driver 解决方法：把mysql的jar包mysql-conne

Spark SQL读取hive数据时报找不到mysql驱动

炼剑

11-29

1165

Exception：Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "BoneCP" plugin to create a ConnectionPool gave an error : The specified datastore driver ("com.mysql.jdbc.Driver

java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

皓月星辰

07-24

221

折腾了一上午，找到了这错误的原因。哎……悲剧！总结一下： 1.检查MySQL驱动包有问题没，在网上下载的MySQL驱动包有可能会出问题。尽量下载那种压缩包。我曾经就连着下载了好几个jar包都出问题，最后又一次下载了个压缩包。而不是直接的jar包才解决，由于压缩包不会那么easy丢失文件。 2.假设MySQL和MyEclipse不是装在同一台机器上，或者是My...

Spark insertIntoJDBC找不到Mysql驱动解决方法

光于前裕于后的博客

06-27

5404

java.sql.SQLException: No suitable driver found for jdbc:mysql://ip:3306/xx　　感觉很奇怪，我在启动作业的时候加了Mysql驱动啊在，怎么会出现这种异常呢？？经过查找，发现在–jars参数里面加入Mysql是没有用的。通过查找，发现提交的作业可以通过加入–driver-class-path参数来设置driver的classpa

java.lang.ClassNotFoundException: com.mysql.jdbc.Driver at java.base/jdk.internal.loader.BuiltinClassLoader.loadClass(BuiltinClassLoader.java:641) at java.base/jdk.internal.loader.ClassLoaders$AppClassLoader.loadClass(ClassLoaders.java:188)

最新发布

05-24

System.out.println("MySQL JDBC Driver not found."); e.printStackTrace(); } ``` 注意：自JDBC 4.0起，通常无需再手动执行该操作，因为驱动会自动被检测和加载。但如果遇到兼容性问题，仍可尝试此法。 --- ##...

py4j.protocol.Py4JJavaError: An error occurred while calling o40.load. : java.lang.ClassNotFoundException: org.mysql.jdbc.Driver

05-09

有时候版本不兼容也会引发ClassNotFound异常。需要建议用户使用与MySQL版本对应的驱动，并确保没有重复的JAR包。综上所述，解决方案的步骤应该是：1. 检查并修正驱动类名；2. 下载并添加正确的MySQL驱动JAR；3. ...

org.datanucleus.exceptions.NucleusException: Attempt to invoke the "BONECP" plugin to create a ConnectionPool gave an error : The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH. Please check your CLASSPATH specification, and the name of the driver.

03-19

嗯，用户遇到了NucleusException异常，具体是BONECP连接池插件找不到com.mysql.jdbc.Driver这个驱动。首先，我需要回忆一下类似的问题，比如引用中提到的Hive和Spark的...Class.forName("com.mysql.jdbc.Driver"); ```

spark提交报ClassNotFoundException

baidu_41279069的博客

08-27

3177

1：若object有package时，--class后接的格式应该是packageName.objectName；若object没有package时，--class后接的格式应该是objectName。 2：--deploy-mode 驱动器进程是在集群上工作节点运行（cluster），还是在集群之外客户端运行（client）（默认：client）；尝试加上 --deploy...

java.lang.ClassNotFoundException: com.mysql.jdbc.Driver解决方案

倩mys的博客

08-20

871

错误：java.lang.ClassNotFoundException: com.mysql.jdbc.Driver 解决方案：先查看数据库连接是否有细节错误，再检查是否导入jar包

解决java.lang.ClassNotFoundException: com.mysql.jdbc.Driver

苍白的小包叽的博客

08-02

933

https://blog.csdn.net/weixin_43157199/article/details/82792105 eclipse也可以用

spark读mysql索引丢失_spark-submit找不到mysqldriver

weixin_28907247的博客

02-07

798

spark-submit找不到mysqldriver2018-05-22 17:57阅读：播种者博主很神秘，什么也没有留下~关注在将job提交上集群上暴出这个问题，使用local模式不存在问题，尝试使用 --jars参数和--driver-class-path将需要的jar文件加入启动参数中，依然不能解决问题。查看日志发现总是在hadoop38机器上发生这个问题，怀疑是这个节点不...

spark 启动报错 ClassNotFoundException

qq_21896123的博客

05-06

3551

spark 程序启动命令如下 spark-submit --class com.test.sparkjob.order.OrderFullLoad /Users/jisen/Desktop/spark-job-1.0.jar --jars /Users/jisen/Desktop/terajdbc4.jar 启动后报错如下：这个问题困扰我很久，在我无助时请教了小白同学，他让我试一下如下命令： spark-submit --jars jars/tlddderajdbc4.jar --class co

使用sparksubmit提交application时始终找不到三方jar 提升class not found

u013314600的博客

06-26

4450

spark2.1.0 hadoop 2.6.0(ambari)spark中使用了三方jar并且运行模式为yarn时，执行如下命令：./spark-submit --master yarn --deploy-mode cluster --driver-memory 1g --executor-memory 3g --executor-cores 1 --class com.test.Test /tm...

spark+mysql+驱动_java使用spark查询mysql报错找不到驱动

weixin_28802993的博客

01-20

474

System.setProperty("hadoop.home.dir","D:\\spark-1.6.1-bin-hadoop2.6\\spark-1.6.1-bin-hadoop2.6");SparkConfconf=newSparkConf().setAppName("sparktest1").setMaster("local[2]...System.setProperty("hadoop....

java.lang.ClassNotFoundException:com.mysql.jdbc.Driver解决方法

Mylilizhi的博客

03-15

3190

折腾了很久，终于在网上找到了错误的原因。这里也发一篇帮助广大新手指导如何解决。原因是tomcat找不到mysql jar包的问题。在java项目中，只需要引入mysql-connector-java-5.1.7-bin.jar就可以运行java项目。在web项目中，当Class.forName("om.mysql.jdbc.Driver");时myeclipse是不会去查找字符串，不会

pyspark读取mysql数据，并解决报错java.lang.ClassNotFoundException: com.mysql.cj.jdbc.Driver

小哇

05-18

767

直接将mysql的驱动jar包放到spark安装目录中的jars目录有些博文说是，此方法无效，但本人没有碰到，后期出现问题再修正代码示例 #配置本地spark的环境，必须放在最前面 import findspark findspark.init() print(findspark.find()) from pyspark.sql import SparkSession #新建sparksession sparksession = SparkSession.builder.master("loc