Hue中Sqoop Editor使用--query的坑

本文详述了在Hue 4.*版本的Sqoop Editor中使用--query选项导致作业被杀死的问题。问题源于命令行中的换行符和空格被错误解析为参数。查阅Cloudera官方和社区资料,发现由于命令被Oozie按空格拆分,导致含有空格的Sqoop命令无法正常执行。解决方案是在Hue Workflow中使用Sqoop action,将SQL语句放入arguments中,而非使用带--query的Sqoop Editor。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

概述

       本文描述了在Hue中Sqoop Editor使用--query的问题及解决办法。

问题

       一个可以在终端运行的带—query的Sqoop脚本,在HUE 4.*版本中使用Sqoop1 Editor运行时job killed。

排查

       查看Yarn日志发现一组报错,看样子 结尾的“\”不会被当作换行符,而是被认成了参数。

       删除所有”\”后执行依然报错,import后只有—connect被识别了,后续的参数都没有被识别, 由此判断不能换行。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值