hive锁 导致 hive select、alter、sqoop表异常

在CDH6.2.1环境下,由于服务器意外断电导致Hive查询异常,部分表无法执行select和alter操作。经过排查确定为Hive锁问题。通过清理Hive元数据存储在mysql的HIVE_LOCKS表中的锁定记录,删除对应表的锁,最终解决了问题,使Hive查询恢复正常。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

环境:CDH6.2.1,Java8

HDFS3.0.0+cdh6.2.1
Hive2.1.1+cdh6.2.1
ZooKeeper3.4.5+cdh6.2.1
Sqoop1.4.7+cdh6.2.1
Flume NG1.9.0+cdh6.2.1

问题:假期服务器突然断电,导致正在查询的hive进程异常,重启系统之后,发现hive表不能执行,select、alter都不行,不过是部分表这样。

解决:查看日志并在网上查询后,发现是hive锁的问题,不过办法都试过了,没有用,最后发现好多这种解决办法:

在Hive数据库的元数据存储mysql数据库的hive元数据hive表中执行 

delete from HIVE_LOCKS where HL_DB = 'cdn' and HL_TABLE = 'cdn_log';

比如:https://blog.youkuaiyun.com/w635614017/article/details/89095174 最后

select * from HIVE_LOCKS;

delete from HIVE_LOCKS where HL_DB = 'hive' and HL_TABLE = 'monitor';

 

hive查询show locks;找出异常的表信息,挨个删除就好。

做完之后,发现查询正常了。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值