hive报错(1)MoveTask

本文介绍在CDH上执行Hive SQL时遇到的一个特定错误:ExecutionError, returncode 1 from org.apache.hadoop.hive.ql.exec.MoveTask。此错误发生在尝试将数据写入不存在的目录时,并提供了详细的解决方案,包括调整Hive配置来解决该问题。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

在CDH上执行hive sql的时候报了一个错。

错误内容为:

    FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask
错误语句:

    INSERT OVERWRITE DIRECTORY '{$dir}' select * from tmp_analyse_os where logdata='{$begin}'  ;

 

错误原因:

    hive源码会检查导出的路径是否存在,如果不存在则报这个错。这个错只有在CDH上的hive才会报错,apache已经修复了这个bug,其实CDH不是没有修复这个bug,而是添加了一个配置文件,但配置文件默认是false(蛋疼)。


解决方法:

    在hive上添加一个配置即可。

1
2
3
4
 <property>  
  <name>hive.insert.into.multilevel.dirs</name>  
  <value>true</value>  
</property>
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值