Hadoop总结（1）-体系

最新推荐文章于 2025-09-06 21:58:22 发布

weixin_30567471

最新推荐文章于 2025-09-06 21:58:22 发布

阅读量57

点赞数

CC 4.0 BY-SA版权

文章标签：大数据

原文链接：http://www.cnblogs.com/huidaoli/articles/3370655.html

Hadoop是一个开源分布式计算平台，包含HDFS和MapReduce等核心技术。HDFS提供高容错性和伸缩性，使Hadoop能运行在低成本硬件上。MapReduce简化了并行程序的开发过程。结合其他项目，Hadoop能够处理海量数据。

hadoop是一个开源分布式计算平台，以hadoop分布式文件系统HDFS和大规模数据分布式编程模型MapReduce为核心。它为用户提供了底部细节透明的分布式基础架构。

HDFS的高容错性，高伸缩性等特点允许用户将hadoop部署在低廉的硬件上，形成分布式系统；而MapReduce分布式编程模型允许用户在不了解系统底层细节的情况下开发并行应用程序。再者，配合其他项目（如下图）的使用，使得用户可以利用hadoop轻松地组织计算机资源，利用集群的计算和存储能力，处理海量数据。

hadoop主要相关项目，我总结了下面一张图供大家参考：