mrking0105的专栏

折腾了好久好久好久的oozie， 现在暂时算是能够用起来了。 主要讲两点吧： 一，部署相关 二，运行相关 ----------------------------- 一，部署相关 oozie用的版本是oozie-3.1.3-incubating，不知道为什么，从3.0起，oozie不支持sqoopAction和HiveAction了。 为了能够执行这两种Action，对他的...

这个问题，搞了整整三天。 都想骂娘了。 由于是尼玛oozie调用mapreduce调用sqoop然后调用hive，关系比较复杂。 所以错误定位搞了好久。 症状描述： 用oozie调用sqoop，将数据表从mysql直接导入到hive的过程中。 全部过程都能执行完毕，数据也导进去了。 但是，那个oozie的job的结果显示是killed的。当然咯，那个action节点的结果也显示是...

=============================== 问题分析： oozie执行action时锁涉及到的jar包，都是用的oozie.libpath指定的sharelib路径中的jar包。 而pig和hive都依赖了antlr-x.x.x.jar。 最要命的是，他们两个还依赖的是不同版本的antlr。 我用的是pig-0.10.0和hive-0.8.1。 pig的...

一， 执行hiveAction除了需要配置oozie.hive.defaults外，还需要配置几个hive的参数。 这点我不是很理解，以为只要在hive-site.xml里面配置了，就完事了，结果不行，还需要单独配置，而且oozie.hive.defaults不配置还不行。 配置如下： [code="conf"] oozie.hive.defaults my-h...

用的oozie-3.1.3 jdk从1.6 升级到1.7 就无法启动了。 报错如下： 2012-11-22 11:13:06,686 INFO HadoopAccessorService:539 - USER[-] GROUP[-] NAME_NODE_WHITELIST :[ ], Total entries :0 2012-11-22 11:13:06,778 FATAL Servi...

不知道为什么bin/addwar.sh里面说只支持0.20.x， 于是修改这个文件，addhadoopjar函数里面添加内容，修改后的函数为： [code="shell"] #get the list of hadoop jars that will be injected based on the hadoop version function getHadoopJars() { ...