本文深入解析了Hadoop计算框架，阐述其分布式、可靠、可伸缩的优点，以及在搜索引擎和海量数据存储领域的应用。详细介绍了Hadoop的两大核心组件：分布式文件系统HDFS和MapReduce计算模型，以及数据存储和运算的基本原理。
一个计算框架
优点：分布式、可靠、可伸缩
主要使用领域：搜索引擎、海量数据存储
hadoop 主要用于处理海量数据。
1. 存储
分布式文件系统：HDFS，hadoop distributed file system
2. 运算
mapreduce，map() + reduce
数据量单位进制：
1byte = 8 bit
kb —— M —— G —— T —— P —— E —— Z —— Y
数据存储：
1. 分割：分布式， dfs distributed file system
2. 运算：mapreduce：map（映射）→ reduce（化简）
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
