Thpffcj的博客

目录1. MapReduce1. MapReduce概述2. 编程模型3. 案例2. YARN1. YARN简介2. YARN原理3. YARN工作机制最后1. MapReduce1. MapReduce概述Hadoop MapReduce 是一个分布式计算框架，用于编写批处理应用程序。编写好的程序可以提交到 Hadoop 集群上用于并行处理大规模的数据。概念面向批处理的分布式计算框架一种编程模型：MapReduce程序被分为Map(映射)阶段和Reduce(化简)阶段核心思想分而治之

目录1. HDFS简介1. 概念2. 设计目标3. 优点4. 缺点2. HDFS原理1. HDFS 架构2. 文件系统命名空间3. 数据复制4. 数据复制的实现原理5. 副本的选择6. 架构的稳定性7. HDFS特点3. HDFS存储原理1. HDFS写数据原理2. HDFS读数据原理3. HDFS故障类型和其检测方法最后1. HDFS简介1. 概念Hadoop分布式文件系统(Hadoop Distributed File System)2003年10月Google发表了GFS(Google Fi