Hiveserver2异常退出，导致连接失败的问题。

最新推荐文章于 2023-09-04 15:02:16 发布
原创 最新推荐文章于 2023-09-04 15:02:16 发布 · 1.6k 阅读 · 0 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#hive

本文介绍了一种常见的HiveServer2连接问题及其解决方案。当尝试连接到HiveServer2时，可能会遇到无法连接的错误，这通常是由于Java堆栈大小设置过小所致。默认配置为50MB，对于一些复杂操作可能不足，导致运行时错误和卡顿。文章建议根据系统配置适当增加堆栈大小，以避免此类问题。
部署运行你感兴趣的模型镜像

Could not connect to hadoop02:10000(code THRIFTTRANSPORT):TTransportExportException(‘Could not connect to hadoop02:10000’,)

在这里插入图片描述
解决方法：修改HiveServer2 的 Java 堆栈大小.
默认配置为50MB,比较小,运行时会出现上面的错误以及运行卡顿的情况,建议将值根据自己的系统配置调大.
在这里插入图片描述

您可能感兴趣的与本文相关的镜像

Stable-Diffusion-3.5

Stable-Diffusion-3.5

图片生成
Stable-Diffusion

Stable Diffusion 3.5 (SD 3.5) 是由 Stability AI 推出的新一代文本到图像生成模型，相比 3.0 版本，它提升了图像质量、运行速度和硬件效率

解决CDH HiveServer2 因OutOfMemory errors原因造成异常退出问题
gmHappy
04-27 2553
问题描述 在诊断->事件中出现如下图异常： 异常描述： The health test result for HIVESERVER2_UNEXPECTED_EXITS has become bad: This role encountered 1 unexpected exit(s) in the previous 5 minute(s).This included 1 exit(s) due to OutOfMemory errors. Critical threshold: any. 解决方
hiveserver2运行异常：GC overhead limit exceeded
ImezZ
02-21 2482
记一次hiveserver2服务运行异常问题。 报错信息： java.lang.OutOfMemoryError: GC overhead limit exceeded 解决方法： 修改hive配置文件hive-env.sh。将原来注释的替换成如下配置 # Hive Client memory usage can be an issue if a large number of clients # are running at the same time. The flags below h
HiveServer2经常异常退出，导致连接失败
蝈蝈
11-17 4231
1 问题描述 在项目中搭建Hive On Spark，在执行查询的数据量比较大时或者查询出来的数据再次插入到DWD层时，经常性的报如下两个错误： 1 ERROR org.apache.parquet.hadoop.ParquetRecordReader: [aafa2e51-4efa-4437-9b07-86b8d55570f0 HiveServer2-Handler-Pool: Thread-47]: Can not initialize counter due to context is not a
hiveserver2经常挂断的原因
qq_43688472的博客
09-04 2659
配置问题：不正确的配置可能导致 HiveServer2 发生问题。如果资源不足，可能会导致 HiveServer2 挂断。Hive 版本问题：某些 Hive 版本可能存在已知的问题或 bug，可能会导致 HiveServer2 挂断。确保使用的 Hive 版本是稳定的，最好是已修复了已知问题的最新版本。查询问题：某些查询可能会占用大量资源或导致错误，从而导致 HiveServer2 崩溃。并发连接数量过多：如果 HiveServer2 处理大量并发连接，可能会超过其容量限制，导致崩溃或挂断。
CDH HiveServer2异常退出
fansy1990的专栏
07-10 5919
本篇参考：http://blog.youkuaiyun.com/gklifg/article/details/50418109、http://blog.youkuaiyun.com/levy_cui/article/details/53992402、http://blog.youkuaiyun.com/lulynn/article/details/46455097。在使用CDH集群的过程中，出现HiveServer2刚启动没多久，客
hiveserver2总是无故挂掉
m0_74903429的博客
12-01 2021
原因；一般情况下是默认堆空间过小导致 解决措施：将hive(根路径下)/conf/hive-env.xml（也可以是hive-env.sh.template)文件里增加一行配置更改堆大小为512mb或者以上
HiveServer2配置与Beeline连接实战
此外，为了允许 root 用户登录（虽然生产环境不推荐），需设置 `hive.server2.enable.doAs=false`，否则会因权限问题导致连接失败。 另一个重要文件 `core-site.xml` 属于 Hadoop 配置体系的一部分，主要影响 HDFS ...
HiveServer2 内存泄漏问题定位与优化方案
字节跳动技术团队官方博客
09-09 4348
动手点关注 干货不迷路 ????前言HiveServer2 属于 Hive 组件的一个服务，主要提供 Hive 访问接口，例如可通过 JDBC 的方式提交 Hive 作业，HiveServer2 基于 Java 开发，整个服务运行过程中，内存的管理回收均由 JVM 进行控制。在 JVM 语言中的内存泄漏与 C/C++ 语言的内存泄漏会有些差异，JVM 的内存泄漏更多的是业务代码逻辑错误引起大量对象引用被...
HiveServer2服务无法启动怎么解决
05-07
如果数据库服务（如 MySQL 或 PostgreSQL）未正常运行或者连接字符串配置错误，都会导致 HiveServer2 启动失败。 - 确保数据库服务已启动，并测试连接： ```bash mysql -u <username> -p<password> -h ``` - ...
Hive启动失败
最新发布
06-11
用户引用的hive.server2.proxy.user配置也值得注意，如果启动时指定了错误的代理用户同样会导致连接失败。考虑到用户能提供完整启动命令，ta应该有一定基础，所以诊断方案可以适当深入，比如建议查看hive.log而不是...
hiveserver2服务异常停止java.lang.OutOfMemoryError: Java heap space
TURING.DT
01-03 8466
2017-01-02 15:34:04,461 WARN  [IPC Client (188363230) connection to nn01/192.168.1.4:8020 from hive]: ipc.Client (Client.java:run(955)) - Unexpected error reading responses on connection Thread[IPC Cl
hiveserver2启动运行异常
weixin_54429519的博客
08-30 2649
问题描述: 解决方案：退出hdfs 的安全模式 第一方案:正常退出安全模式 hdfs dfsadmin -safemode leave 如提示Safe mode is OFF，那就说明退出成功，但有时候这个命令也没办法退出安全模式，就需要使用强制退出 第二种：强制退出安全模式 hdfs dfsadmin -safemode forceExit ...
【CDH】CDH集群hiveserver2服务频繁挂掉
Mrerlou的博客
05-27 1762
问题现象： cdh集群 master00节点 hiveserver2服务2小时内挂掉2次，报内存溢出的问题。 错误日志如下： 问题排查： 打印一下堆的gc 信息 jstat -gc pid 1000 5 堆设置了4g的内存，Eden区只有400M, s0 和 s1区 更小，然后剩余的空间都是老年代区，空间配置不合理，重新配置下堆空间。 解决方案： 设置hiveserver2的jvm参数 -Xmn2g -XX:NewRatio=4 -XX:MaxPermSize=512M -XX:+UseParNew
hiveserver2经常挂掉
Radiation_x的博客
03-31 3300
一般是默认堆空间过小导致的 将hive(根路径下)/conf/hive-env.xml文件里增加一行配置更改堆大小为512mb或者以上
报错 【hiveserver2】hive --service hiveserver2 报错 GC overhead limit exceeded
weixin_44484668的博客
02-06 2077
项目场景： hive --service hiveserver2 报错, 导致hiveserver2 服务无法使用 问题描述： Exception in thread "HiveServer2-Handler-Pool: Thread-556" java.lang.OutOfMemoryError: GC overhead limit exceeded 原因分析： hive shell脚本启动的jvm的堆内存 不足 解决方案： cp hive-env.sh.template hive-env.sh vi
hiveserver2掉线修复
weixin_39037208的博客
12-09 2212
使用hive发现hiveserver2有时会挂掉，查看hive.log发现里边没有相关信息， 但在启动hiveserver2的目录下还有一个nohup.out文件，这里边保存有运行信息，打开发现是因为 这种情况是出现在运行了一个错误的查询之后，可以重启或者将值稍微调大一点。 ...
Hiveserver2服务宕机及解决
Realoyou的博客
05-05 3874
描述： 公司内部使用Hue作为数分团队对大数据的分析产出工具，随着数分业务增加和使用人员复杂，不规范SQL，不规范的使用，导致Hue连接Hive的Hiveserver2服务意外宕机，查看服务日志，并无明显报错，只能在CDH管理界面看出是OOM导致的意外退出，想着通过加大内存以及加上万能重启方式，然而并不能解决，服务运行一段时间后，仍然因OOM挂机，因日志没有详细错误信息，只能看到服务在退出时dump出了很大的堆快照文件（-XX:+HeapDumpOnOutOfMemoryError）,分析快照文件相对较为.
解决云服务商hiveserver2服务不稳定的问题
草小诚的博客
03-07 2233
系统对hive
beeline连接hiveserver2 踩坑2小时！！
day day no bug
02-27 3241
beeline连接hiveserver2的经历 首先安装好hive之后启动hiveserver2服务 [hadoop@localhost apache-hive-2.3.6-bin]$ hiveserver2 which: no hbase in (/home/hadoop/app/jdk1.8.0_201/bin:/home/hadoop/app/jdk1.8.0_201/jre/bin:...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值