博主遇到过调用函数count等时sql一直卡顿,不调用mr,一直处于job创建的状态,后来经博主多次测试发现,该问题出现在yarn上面。job创建完成后无法调用mapreduce,挨个主机检查,nodemanager正常,但未找到resourcemanager,所以,对该集群进行yarn重启,重启完毕后resourcemanager恢复,hive可以正常调用函数,可以正常调用mapreduce,集群业务恢复。
本文分享了一次解决Hive调用MapReduce卡顿的问题经历。博主发现由于ResourceManager缺失导致job无法正常创建与运行,通过重启YARN服务成功解决了问题。
博主遇到过调用函数count等时sql一直卡顿,不调用mr,一直处于job创建的状态,后来经博主多次测试发现,该问题出现在yarn上面。job创建完成后无法调用mapreduce,挨个主机检查,nodemanager正常,但未找到resourcemanager,所以,对该集群进行yarn重启,重启完毕后resourcemanager恢复,hive可以正常调用函数,可以正常调用mapreduce,集群业务恢复。
2605
7659

被折叠的 条评论
为什么被折叠?