Mapreduce编程技巧

老猫饿了

于 2019-09-14 20:47:00 发布

阅读量44

点赞数

文章标签： java redis mapreduce hashmap python

本文链接：https://blog.youkuaiyun.com/u013603364/article/details/124207747

版权

本文深入探讨了MapReduce中的核心概念，包括排序、分区和分组机制，详细解释了key在MapReduce流程中的作用，以及它是如何影响数据的处理和分布。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在MR中，牢牢记住key时什么，因为key许多默认属性

排序===》key的字典序
分区===》key的哈希值  %  reduce task Num
分组===》key相同为一组

 
          x
 
排序===》key的字典序
分区===》key的哈希值  %  reduce task Num
分组===》key相同为一组