安装azkaban,修改过配置文件后去启动executor时报错了

报错原因:大概就是找不到derby自动载入驱动类
分析原因:
1.azkaban在启动时因为检测到hive环境,如果有hive环境就加载hive的lib下所有的jar包!意思是在azkaban启动的时候没有加载hive时,hive没有找到derby,因为hive默认元数据交由derby来管理!
2.主要原因可能是hive高版本的bug,笔者在之前用hive低版本是没有出现该bug!
3.或者是azkaban的版本过低,调用的是hive老的api进行初始化,所以造成hive还会去寻找derby
这是azkaban启动executor脚本截图:

解决办法:

进入到/opt/module/hive/lib端,将derby-10.10.2.0.jar复制到/opt/module/azkaban/executor/extlib/
就可以正常启动了,server端也一样
本文解决Azkaban在启动executor时因找不到derby驱动类导致的问题。分析可能原因包括hive版本bug或azkaban版本过低。解决办法是将derby-10.10.2.0.jar复制到azkaban的extlib目录。
2792

被折叠的 条评论
为什么被折叠?



