Hadoop框架介绍（转自尚硅谷）

Hadoop是什么

• Hadoop是一个由Apache基金会所开发的分布式系统基础架构。
• 主要解决,海量数据的存储和海量数据的分析计算问题
• 广义上来说, Hadoop通常是指一个更广泛的概念-Hadoop生态圈

Hadoop三大发行版本

Hadoop三大发行版本：Apache、Cloudera、Hortonworks。
Apache版本最原始（最基础）的版本，对于入门学习最好。
Cloudera内部集成了很多大数据框架。对应产品CDH。
Hortonworks文档较好。对应产品HDP。

Hadoop的优势

• 高可靠性: Hadoop底层维护多个数据副本,所以即使Hadoop某个计算元素或存储出现故障,也不会导致数据的丢失。
• 高扩展性:在集群间分配任务数据,可方便的扩展数以干计的节点。
• 高效性:在MapReduce的思想下, Hadoop是并行工作的,以加快任务处理速度。
• 高容错性：能够自动将失败的任务重新分配。

Hadoop组成

在Hadoop1.x时代,Hadoop 的MapReduce同时处理业务逻辑运算和资源的调度,耦合性较大,在Hadoop2.x时代,增加了Yarn。
Yarn只负责资源的调度,MapReduce只负责运算。