- 博客(4)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Hadoop :计数器
Hadoop :计数器 一、 实验目的 基于 MapReduce 思想，编写计数器程序。 理解计数器的逻辑和处理场景。 二、 实验要求 能够理解 MapReduce 编程思想 会编写 MapReduce 版本计数器程序 能执行计数器程序和分析执行过程。 三、 实验背景 MapReduce 计数器是什么？ 计数器是用来记录 job 的执行进度和状态的。它的作用可以理解为日志。我们可以 在程序的某个...
2019-11-30 20:05:40
344
原创 Hadoop ：Join 操作
Hadoop ：Join 操作 一、 实验目的 基于 MapReduce 思想，编写两文件 Join 操作的程序。 二、 实验要求 2. 能够理解 MapReduce 编程思想，然后会编写 MapReduce 版本 Join 程序，并能执 行该程序和分析执行过程。 三、 实验背景 3. 概述 对于 RDBMS 中的 Join 操作大伙一定非常熟悉，写 SQL 的时候要十分注意细节，稍 有差池就...
2019-11-28 23:03:36
648
1
原创 Hadoop ：分布式缓存
Hadoop ：分布式缓存 一、 实验目的 理解序列化与反序列化； 熟悉 Configuration 类； 学会使用 Configuration 类进行参数传递； 学会在 Map 或 Reduce 阶段引用 Configuration 传来的参数； 理解分布式缓存“加载小表、扫描大表”的处理思想。 二、 实验要求 假定现有一个大为 100G 的大表 big.txt 和一个大小为 1M 的小表 ...
2019-11-27 19:35:06
671
原创 Hadoop 实验 ：二次排序
Hadoop 实验 ：二次排序 一、 实验目的 进一步立即 MapReduce 思想 编写 SecondarySort 程序。 二、 实验要求 3. 要能理解 MapReduce 编程思想 4. 会编写 MapReduce 版本二次排序程序 5. 其执行并分析执行过程。 三、 实验原理 MR 默认会对键进行排序，然而有的时候我们也有对值进行排序的需求。满足这种 需求一是可以在 reduce 阶...
2019-11-27 11:39:16
738
1
一个简单的Java控制台关于泛型的银行操作系统.rar
2019-11-01
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人