
MapReduce
BB侠的大数据之旅
愿我们的生活不会有bug
展开
-
大数据框架Hadoop:第二章 计算框架MapReduc(二)分区、排序、归并、分组以及MapTask和ReduceTask
系列文章目录 大数据框架Hadoop:第一章 HDFS分布式文件系统(一) 大数据框架Hadoop:第一章 HDFS分布式文件系统(二) 大数据框架Hadoop:第二章 计算框架MapReduce(一) 大数据框架Hadoop:第二章 计算框架MapReduce(二) 文章目录系列文章目录前言一、Map Task数量及切片机制1.MapTask个数2. 如何控制mapTask的个数二、分区、排序、归并、分组1.mapreduce的partitioner详解默认分区器HashPartitioner自原创 2020-12-22 16:57:30 · 481 阅读 · 0 评论 -
大数据框架Hadoop:第二章 计算框架MapReduce(一)
Hadoop系列文章目录 大数据框架Hadoop(一):HDFS分布式文件系统(上) 大数据框架Hadoop(二):HDFS分布式文件系统(下) 大数据框架Hadoop(三):计算框架MapReduce(上) 文章目录Hadoop系列文章目录前言一、MapReduce是什么?1. mapreduce的定义2.mapreduce的核心思想二、MapReduce编程1.MapReduce编程模型1. Map阶段2. Reduce阶段2.Mapreduce编程指导思想(八个步骤)1. Map阶段2个步骤2. s原创 2020-12-20 11:45:40 · 293 阅读 · 2 评论