- 博客(5)
- 收藏
- 关注
原创 MapReduce应用
/第一个Object表示输入key的类型;//获取并输出每一次的处理过程。//从输入中得到的每行的数据的类型。//参数同Map一样,依次表示是输入键类型,输入值类型,输出键类型,输出值类型。//统计元素的次数count。
2023-04-27 19:53:22
54
1
原创 linux-大数据库 实验5 文本复制
/自定义Partition函数,此函数根据输入数据的最大值和MapReduce框架中Partition的数量获取将输入数据按照大小分块的边界,然后根据输入数值和边界的关系返回对应的Partiton ID。//reduce函数将map输入的key复制到输出的value上,然后根据输入的value-list中元素的个数决定key的输出次数,定义一个全局变量line_num来代表key的位次。
2023-04-26 11:35:59
237
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人