- 博客(2)
- 收藏
- 关注
原创 记录一次hvie对接dolphinscheduler调用超时问题
解决方式:1.将dolphinscheduler的源码编译使其支持obs协议,并相应的提升hadoop版本,最好是直接使用华为的相关jar进行编译,相关任务运行的脚本也要修改至支持obs。在dolphinscheduler调用hive时,尤其是指定tez引擎运行相关的sql的时候会出现timeout的情况。简单的sql,可以调通,文本较长的sql的,在制定tez引擎时,大概率出现timeout情况(集群/队列资源充足)下载相应的开源版本,修改超时时间,替换,搞定!历时近半个月的加班结束!
2023-11-07 10:36:19
457
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人