
Oozie
oo寻梦in记
这个作者很懒,什么都没留下…
展开
-
[oozie基础]-- 部署spark、hadoop、hive、shell和java程序举例
一、oozie执行shell脚本(执行mr任务,实现合并增量数据) 参考:http://gethue.com/use-the-shell-action-in-oozie/ 1、点击创建、拖动到上面 2、添加命令:bash,当然也可以是linux的其他可执行的命令 3、添加参数:注意---》参数名称是shell脚本的全称(run-mr-compact.sh) ...原创 2017-07-09 15:31:02 · 2748 阅读 · 0 评论 -
[Hive基础]-- 编写hive udf和使用hive udf:hue的hive界面中使用hive udf函数、oozie使用hive udf函数、hive命令行使用udf函数
开发环境:jdk1.7+idea 16+hive-1.1.0 使用udf的生产环境:cdh5.8.0+hive-1.1.0 1、导入hive的所有相关jar包 或者使用maven引入CDH相关包: 4.0.0 com.enn hive-udf 1.0-SNAPSHOT UTF-8 UTF...原创 2016-09-03 21:20:01 · 10555 阅读 · 2 评论