本文详细介绍了MapReduce的基本和非基本模式，包括计数、归类、过滤、分布式任务执行、排序等，并探讨了其在日志分析、ETL、图处理、网页排名等场景的应用。此外，还涉及值去重、互相关等复杂操作，为数据密集型处理提供参考。
在这篇文章里总结了几种网上或者论文中常见的MapReduce模式和算法，并系统化的解释了这些技术的不同之处。所有描述性的文字和代码都使用了标准hadoop的MapReduce模型，包括Mappers, Reduces, Combiners, Partitioners,和 sorting。如下图所示。
订阅专栏 解锁全文
扫一扫
222
评论
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
查看更多评论
添加红包
