MapReduce理解

分治算法模型有三步:

(1)把大问题分解为小问题;

(2)求解小问题;

(3)合并小问题的解得到大问题的解。


MapReduce计算模型就是一个分治算法模型:


在Hadoop上编写程序,我们只需要实现map函数(对应于分治算法的第二步:对小问题求解)和reduce函数(对应于分治算法的第三步:合并小问题的解),因为Hadoop平台帮我们做了问题的分解这一步。


从上面的图中,可以看出Hadoop提高解决问题速度的原因:它把大问题分解到不同的节点上并行的求解。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值