MapReduce
关注
分享
扫一扫
文章平均质量分 89
匿名啊啊啊
这个作者很懒，什么都没留下…
展开
-
MapReduce — 数据分类输出和小文件合并
MapReduce 典型编程场景 2目录1、自定义 OutputFormat--数据分类输出 ........................................................................... 1 1.1、需求.....................................................................原创 2018-03-20 08:44:08 · 2657 阅读 · 0 评论 -
MapReduce学习（一）MapReaduce的核心运行机制
概述一个完整的MapReaduce程序在分布式运行时有两类实例进程：1、MRAppMaster：负责整个程序的过程调度及状态协调。2、YarnChild：负责map阶段的整个数据处理流程。3、YarnChild：负责reduce阶段的整个数据处理流程，以上两个节点MapTask和ReduceTask的进程都是YarnChild，并不是说这MapTask和ReduceTask就跑在同一个YarnCh...原创 2018-04-26 20:19:39 · 1302 阅读 · 0 评论