
Pig
serven-star
这个作者很懒,什么都没留下…
展开
-
Pig安装及简单实例
前面讲到了如何用MapReduce进行数据分析。当业务比较复杂的时候,使用MapReduce将会是一个很复杂的事情,比如你需要对数据进行很多预处理或转换,以便能够适应MapReduce的处理模式。另一方面,编写MapReduce程序,发布及运行作业都将是一个比较耗时的事情。Pig的出现很好的弥补了这一不足。Pig能够让你专心于数据及业务本身,而不是纠结于数据的格式转换以及MapReduce程序编写。原创 2014-01-10 22:36:00 · 18299 阅读 · 1 评论 -
Pig用户自定义函数(UDF)
以词频统计为例,讲解Pig的用户自定义函数(UDF)。原创 2014-01-15 22:49:23 · 12708 阅读 · 2 评论 -
Pig基础
Pig Latin常用命令,基本语法,数据类型,模式定义。原创 2014-01-13 15:45:13 · 11279 阅读 · 0 评论 -
Pig 常用操作
以实例形式讲解Pig的基本操作,包括load,store,filter,foreach generate,group,stream,join,cogroup,cross,order,union等。原创 2014-01-18 00:24:59 · 16893 阅读 · 0 评论