spark-sql启动报错：Error creating transactional connection factory

最新推荐文章于 2025-04-07 16:08:49 发布
原创 最新推荐文章于 2025-04-07 16:08:49 发布
· 2.1k 阅读 · 1 ·
版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#Error creating transactional c

原因：我们在安装Hive时候，是用的MySQL作为元数据服务器的，因此再启动spark-sql时候需要对应的mysql的jar包的支持。
解决方案：只需要在启动spark-sql的时候指定mysql-connector-java-5.1.26.jar位置即可。
即：bin/spark-sql --driver-class-path /usr/local/hive/lib/mysql-connector-java-5.1.26.jar

Spark报错：JDOFatalInternalException: Error creating transactional connection factory
九师兄
07-04 1207
1.美图 2.背景 写了一个spark测试了 @Test def nowTest(): Unit ={ val spark = SparkSession.builder.appName("JavaStructuredKafka").master("local[4]").enableHiveSupport.getOrCreate val socketLine = spark....
HBase实战（5）：Spark SQL+Hive +HBASE 使用Spark 操作分布式集群HBASE
段智华的博客
06-14 3060
HBase实战（5）：Spark SQL+Hive +HBASE 使用Spark 操作分布式集群HBASE1，基于spark 2.3.0 直接进入spark sql 客户端，提示出错，找不到“com.mysql.jdbc.Driver”root@master:/usr/local/spark-2.3.0-bin-hadoop2.6/bin# spark-sql SLF4J: Class path ...
spark访问Hive错误Error creating transactional connection factory
Big_data_implicit_
12-13 2745
1、使用windows访问集群时，需要装utils 位置：直接下载https://github.com/cdarlint/winutils 找到对应版本，并在windows环境变量中新建：HADOOP_HOME 2、Error creating transactional connection factory 其它配置请参见之前的一篇配置文章： spark02： 围绕Spark3.0.1为主Hadoop3.2、Mysql、Hbase2.3.3、Hive3.1.2、ZooKeepe...
Spark-Sql启动报错：Error creating transactional connection factory
METON的博客
08-28 1万+
1、SparkSQL配置    将$HIVE_HOME/conf/hive-site.xml配置文件拷贝到$SPARK_HOME/conf目录下。    将$HADOOP_HOME/etc/hadoop/hdfs-site.xml配置文件拷贝到$SPARK_HOME/conf目录下。 2、运行SparkQL    在 cd /usr/local/spark,下运行 ./bin/spar
spark-sql 启动报错 Failed to load class org.apache.spark.sql.hive.thriftserver.SparkSQLCLIDriver
最新发布
未知的博客
04-07 204
包含hadoop、hive等相关依赖。：最简打包，不强绑定其他依赖。的spark版本就能解决该报错。运行spark-sql报错。有两个版本的spark。以3.3.4版本为例。
Spark 连接hive，启动spark-shell报错：Error creating transactional connection factory
qq_32783151的博客
05-09 752
在使用Spark连接HIve，启动spark-shell的时候，报错： Error creating transactional connection factory 输入命令为：./spark-shell --master spark://nodes03:7077 此时已经将$HIVE_HOME/conf/hive-site.xml，$HADOOP_HOME/etc/hadoop/core-site.xml hdfs-site.xml拷贝到$SPARK_HOME/conf下，但是依然报错。 解决办法如下
MetaException(message:Error creating transactional connection factory)
zx1280354015的博客
05-21 1072
hive启动报错Caused by: java.net.ConnectException: Connection refused (Connection refused)
大数据系列五：Hive
dustzhu的博客
06-26 2459
一.前言 Hive是建立在Hadoop之上的数据仓库，由Facebook开发，现在是apache顶级开源项目；它依赖于HDFS存储数据，依赖MR处理数据；不完全支持SQL标准，其事务支持，索引，子查询和连接操作也存在很多限制，新版本已经支持update,但效率不高； Hive主要由三个模块： 1.用户接口模块，含CLI、HWI、JDBC、Thrift Server 。 2.驱动模块(Driver)，含编译器、优化器、执行器等 。 3.元数据存储模块(Metastore)，是一个独立的关系型数据库，通常与M
大数据学习----- Hadoop、Spark、HBase、Hive搭建环境遇到的错误以及解决方法
h471507602的博客
12-17 1027
前言 在搭建大数据Hadoop相关的环境时候，遇到很多了很多错误。我是个喜欢做笔记的人，这些错误基本都记载，并且将解决办法也写上了。因此写成博客，希望能够帮助那些搭建大数据环境的人解决问题。 说明: 遇到的问题以及相应的解决办法是对于个人当时的环境，具体因人而异。如果碰到同样的问题，本博客的方法无法解决您的问题，请先检查环境配置问题。 Hadoop伪分布式相关的问题 1，FATAL con...
第114课:SparkStreaming+Kafka+Spark SQL+TopN+Mysql+KafkaOffsetMonitor电商广告点击综合案例实战(详细内幕版本)
热门推荐
段智华的博客
06-05 1万+
第114课:Spark Streaming电商广告点击综合案例实战(测试版本) /* 王家林老师授课http://weibo.com/ilovepains  每天晚上20：00YY频道现场授课频道68917580*/ 综合案例的实战我们分步进行： 1.Mysql 中建立表 ：
启动hive报错org.datanucleus.exceptions.NucleusException:Error creating transactional connecCtion factory
哇咔咔哇咔的博客
12-26 1853
启动hive报错org.datanucleus.exceptions.NucleusException:Error creating transactional connecCtion factory
IDEA中运行SparkSql报javax.jdo.JDOFatalInternalException: Error creating transactional connection factory
森屿旅人996的博客
07-20 1620
在IDEA中运行SparkSql，报错如下 20/07/20 21:16:25 WARN HiveMetaStore: Retrying creating default database after error: Error creating transactional connection factory javax.jdo.JDOFatalInternalException: Error creating transactional connection factory at org.datanuc
启动hive时报错：javax.jdo.JDOFatalInternalException: Error creating transactional connection factory
weixin_43467992的博客
01-12 9830
通过hive --service metastore & 命令启动hive时报错： hive下hive -site.xml配置错误，重新配置了下好了（我的hive是整合了hue的） 下面是我的配置信息 hive.server2.thrift.port 10000 hive.server2.thrift.bind.host mini1 hive.server2.long.p...
使用idea集成开发工具， 使用sparksql对hive数据进行操作报错 Error creating transactional connection factory javax.jdo.JDOF
T_Y_F_的博客
12-20 1046
使用idea集成开发工具， 使用sparksql对hive数据进行操作报错 Error creating transactional connection factory javax.jdo.JDOF
spark-shell启动出现的Error creating transactional connection factory解决办法
Hiwes的博客
06-13 4642
版本信息：Spark：2.2.0-bin-2.6.0-cdh5.7.0Hive：1.1.0-cdh5.7.0MySQL：5.7.22问题：在使用Spark连接HIve，启动spark-shell的时候，报错:此时输入命令为：bin/spark-shell --master lcoal[2]此时已经将$HIVE_HOME/conf/hive-site.xml拷贝到$SPARK_HOME/conf下，...
spark-sql 报错：Exception thrown flushing changes to datastore
赵英超的博客
05-10 1043
spark-sql hive
使用spark.sql运行任务出现See the nested exceptionorg.datanucleus.exceptions.NucleusException: Error creatin
ryse1461的博客
12-27 844
经过查找网上没有给出明确的解决方法，均是模糊不清。不过也有道友出现类似的情况，通过日志定位到问题所在应为Spark/Jars文件夹下缺少mysql-connector.jar包，从而无法访问Hive的metastore。
hive --service metastore 启动报错
m0_54233757的博客
08-02 6545
Hadoop@masterHive]$2021-10-28153757StartingHiveMetastoreServeratorg.apache.hadoop.hive.metastore.RetryingHMSHandler.(RetryingHMSHandler.java84)atorg.apache.hadoop.hive.metastore.RetryingHMSHandler.getProxy(RetryingHMSHandler.java93)atorg.
MetaException(message:Error creating transactional connection factory)报错怎么办
03-26
MetaException(message:Error creating transactional connection factory)报错通常表示在Hive中创建事务连接工厂时出现了错误。解决此错误的步骤如下： 1. 检查Hive Metastore的日志文件，以查看更详细的错误消息和堆栈跟踪。 2. 确保所有必需的服务和进程在运行。例如，确保Hive Metastore服务正在运行，并且Hive服务正在使用正确的配置文件。 3. 检查Hive的配置，确保正确配置了Hive Metastore的连接属性。特别是，确保使用正确的数据库，用户名和密码。 4. 如果使用Kerberos进行身份验证，请确保正确配置了Kerberos身份验证。此外，还需要检查是否为Hive Metastore（通常是thrift服务）配置了正确的Kerberos principal和keytab文件。 5. 如果所有这些步骤都没能解决问题，则可以尝试重新启动Hive服务并重新启动Hive Metastore服务，以确保所有服务和进程都正确初始化。 总的来说，MetaException(message:Error creating transactional connection factory)报错可能源于多个方面，需要仔细排查。建议查看详细的错误日志，并根据错误提示采取必要的行动来解决问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值