hive启动时出现的小BUG问题的解决

最新推荐文章于 2023-02-20 21:47:45 发布
最新推荐文章于 2023-02-20 21:47:45 发布
阅读量392 收藏
点赞数
CC 4.0 BY-SA版权
分类专栏： 其他 文章标签： hive中的小bug
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/Colayang/article/details/95455753
博客指出Hive出现bug的原因，在spark老版本中lib里加载相关JAR包，而spark 2.0.0之后原lib包不存在，JAR包被分散替代，导致找不到spark - assembly JAR包。解决办法是将相应路径修改为/jars/*.jar，并给出进入指定目录编辑文档的操作。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

在这里插入图片描述
搜索了一番发现，出现该bug原因如下：
首先在bin目录下的hive中，发现了bug中的提示语。
spark的老版本中，在lib里进行了相关JAR包的加载。
而spark 2.0.0之后，原有的lib包已不存在，而且原有的JAR包已被分散为小JAR包替代，所以会出现找不到这个spark-assembly JAR包。
解决：将相应路径修改为/jars/*.jar即可，参考如下截图

进入 /opt/module/hive/bin
编辑文档 vim hive
在这里插入图片描述

聊一聊Hive开发时遇到的bug
草莓猿
06-22 1200
文章目录前言1.Hive的连接idea创建表启动hive遇到的问题hive的文件存储格式 前言 相信各位在刚入门的时候学习基础知识的时候,都有过一段比较迷茫是时期…我觉得学习上迷茫一段时间是好事,它可以警醒自己,让自己有一个透彻的觉悟。同时也可以鞭策自己,在自己在未来的路上，成长可期… 1.Hive的连接idea创建表 1.1创建表 驱动信息 加载驱动 建立连接 注意事项: 1 hive2...
Hadoop 安装踩坑与hive启动报错
weixin_45890762的博客
05-15 910
hadoop安装踩坑，jps process information unavailable，tmp下无文件，hive启动失败问题修复
hive bug
AlvinNoending的专栏
04-09 552
1. hive的insert bug 001，如下: insert overwrite table XXX  partition(dt='2016-04-09') as select  '' as a1 from YYY;    如此得到的表XXX有一个字段，但是这个字段的值并非空字符串，也就是（'’），而是null。但是使用create  select 不会出现。这个bug已经再新版本得到
Hive Bug集锦
那又怎样？的博客
10-16 2270
1.安装hive后无法启动，报错如下[ERROR] Terminal initialization failed; falling back to unsupported java.lang.IncompatibleClassChangeError: Found class jline.原因是hadoop目录下存在老版本jline：/hadoop-2.6.5/share/hadoop/yarn/l...
hive解析hql的bug，先记录下
洗洗睡吧
06-03 272
—结果不正确，只找到1号数据，平均数没有计算出来，都是6.1的数据 select platform,b.week_of_year ,content_type_id ,cast(avg(uv) as decimal(15,2)) as week_avg_uv ,cast(avg(pv) as decimal(15,2)) as week_avg_pv ,cast(avg(duration) as decimal(15,2)) as week_avg_duration ,cast(avg(l1_pai_uv)
Hive1.1.0中一个BUG的记录分析
weixin_34402408的博客
04-04 366
最近在工作中，使用CASE WHEN语句的时候，总是出现异常，查看日志是由于数组超界。不知所以然，然后进行了一步步分析，发现这是hive本身的bug，分享出来，一是为了记录，二是想让大家共同看看，欢迎指正。 使用的是CDH5.14.0版本。 CDH5.14.0使用的HIVE版本 自建日志表log： +------------------------...
hive: 优化配置及bug查询路径
皮皮blog
02-07 2168
mapper数量与输入文件的split数息息相关，在Hadoop源码org.apache.hadoop.mapreduce.lib.input.FileInputFormat类中可以看到split划分的具体逻辑。如果想增大mapper数，除了降低mapred.min.split.size之外，也可以调高mapred.map.tasks。参数mapred.min.split.size（默认值1B）和mapred.max.split.size（默认值64MB）分别用来指定split的最小和最大大小。
hive出现内存溢出_解决Hive内存溢出问题 2.1 GB of 2.1 GB virtual memory used. Killing container...
weixin_39635459的博客
12-24 1101
第一次Hive报错：java.lang.OutOfMemoryError: Java heap space解决办法：通过在yarn-site.xml添加以下配置：yarn.scheduler.maximum-allocation-mb2048yarn.scheduler.minimum-allocation-mb2048yarn.nodemanager.vmem-pmem-ratio2.1mapr...
解决Hive启动失败Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient
热门推荐
大数据梦想家
02-17 1万+
        今天在使用Hadoop集群上的Hive时，结果出现了以下的情况。 hive (default)> show databases; FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException: java.la...
HIVE向量化执行引擎优化功能的bug解决(Caused by: java.lang.ClassCastException: java.lang.Integer cannot be cast to[B
m0_46570243的博客
08-17 1943
项目场景： 项目任务调度 dwd层事件明细表-->dws层流量聚合表脚本开发 初期使用时一切正常 *脚本测试代码如下:* export HIVE_HOME=/opt/apps/apache-hive-3.1.2-bin/ datestr=`date -d'-1 day' +%Y-%m-%d` if [ $1 ] then datestr=$1 fi ${HIVE_HOME}/bin/hive -e " INSERT INTO TABLE dws.app_pv_agg_session PAR
hive的一些报错及解决方法
12-18
hive的一些报错及解决方法：连接报错、执行脚本卡住、内存溢出报错、表死锁问题
Hive Bug系列之关联结果不正确详解
xiaoluobutou的专栏
02-20 1006
Hive是互联数据仓库中使用最频繁的工具，做为仓库的技术人员，有很大必要去深入了解它，并以认真的态度去对待工作中遇到的每个问题，每个知识点，由点及面，让我们的技术更扎实，也让我们更有底气！
远程连接hive报错
鸭梨的博客
01-12 957
Missing class org/apache/hive/service/cli/thrift/TCLIService$Iface. 原因是用了一个古老的CDH版本的hive找不到驱动, Maven Repository: org.apache.hive » hive-jdbc » 1.1.0-cdh5.13.2 https://mvnrepository.com/artifact/org.apache.hive/hive-jdbc/1.1.0-cdh5.13.2 ...
Hive:BUG记录，错误使用动态分区导致的插入失败
ZJH
11-19 2244
在Hive中，插入数据时可以指定动态分区，如果，，就可以不需要指定hive变量。
一次性解决datagrip连接hive报错问题
分享、总结
04-07 1万+
先看看具体报错 使用默认的jdbc驱动 报错 [ 08S01] Could not open client transport with JDBC Uri: jdbc:hive2://hadoop102:10000: Could not establish connection to jdbc:hive2://hadoop102:10000: Required field 'client_protocol' is unset! Struct:TOpenSessionReq(client_proto
HIve项目中常见错误，及修改办法
lz_N_one的博客
07-29 1291
HIve项目中常见错误，及修改办法
Hive常见的bug与解决办法
我的博客
08-15 1367
转自:https://blog.youkuaiyun.com/qq_26442553/article/details/78807211 1.在hiveserver2客服端操作数据库出错：        Error: Error while compiling statement: FAILED: RuntimeException Cannot make directory: hdfs://hadoop102...
hive常见故障处理
空自留的博客
12-30 1438
故障现象：hive主机重启后，执行hive命令无法进行查询操作，尝试重新初始化，出现如下报错。 # schematool -dbType mysql -initSchema --verbose SLF4J: Class path contains multiple SLF4J bindings. SLF4J: Found binding in [jar:file:/opt/hadoop/hive/lib/log4j-slf4j-impl-2.6.2.jar!/org/slf4j/impl/Static
启动 hiveserver2失败，一直卡住
YellowXiuHui的博客
03-05 1万+
一.要知道，HiveJDBC访问Hive， 1.必须先启动hiveserver2服务 [atguigu@hadoop102 hive]$ bin/hiveserver2 2.启动beeline [atguigu@hadoop102 hive]$ bin/beeline Beeline version 1.2.1 by Apache Hive beeline> 3.连接hiveserver...
解决Hive 2.1.1中数组越界错误的配置更新方案
在处理 Hive ORC 文件格式读取时出现的数组越界错误时，替换相关的 jar 包是一种快速有效的解决办法。但需要注意的是，替换操作可能会引发其他兼容性问题，因此需要谨慎进行，确保更新后的组件能够在现有的系统环境...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值