- 博客(14)
- 收藏
- 关注
RSS订阅原创 山东大学软件工程应用与实践——Pig代码分析（一）
2021SC@SDUSC概述执行引擎将MapReduce作业以排序顺序提交到Hadoop。这些MapReduce作业在Hadoop上执行，产生所需的结果。AccumulatorOptimizerUtil类addAccumulator（）方法public static void addAccumulator(PhysicalPlan plan, List<PhysicalOperator> pos) { if (pos == null || pos.siz
2021-10-10 22:18:09
225
原创 山东大学软件工程应用与实践——Pig代码综述
2021SC@SDUSC目录一、Pig是什么？二、Pig的特点三、Pig安装部署四、组内分工一、Pig是什么？Pig 是Apache平台下的一个免费开源项目，是MapReduce的一个抽象。它是一个工具，用于分析较大的数据集，并将其表示为数据流。常与Hadoop一起使用，可以使用Pig在Hadoop中执行所有的数据处理操作。Pig提供的一种SQL-LIKE语言叫Pig Latin，该语言的编译器会把类SQL的数据分析请求转换为一系列经过优化处理的MapRe..
2021-09-30 15:23:43
415
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人