- 博客(1)
- 收藏
- 关注
RSS订阅原创 Hadoop MapReduce知识点
为复试所准备，担心老师问到相关的问题。 MapReduce求解步骤 Step1：自动对文本进行分割 Step2：对每一对键值对用用户定义的map函数进行处理，再生成新的键值对 Step3：对输出的结果进行归拢、排序（系统自动完成） Step4：用reduce函数操作生成最后的结果 MapRedeuce在Hadoop上的执行过程 -Map 从磁盘读入数据 执行map函数 Combine结果 将结果写到本地磁盘上 -Reduce 从各个map task的磁盘上读出相应的数据（shuff
2022-03-13 13:40:25
2147
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人