编程｜成长｜生活，保持好奇心。

MR原理

在2003，2004，2006年谷歌发布的三篇论文奠定了大数据技术的核心理念，它们分别是：GFS、MapReduce、Bigtable。可以说，谷歌是大数据领域的普罗米修斯。经过10多年的蓬勃发展，大数据领域的技术在如今已经发展的比较成熟了，但随着生成式AI技术的火爆，大数据和AI的融合肯定也会继续加速发展。GFS、MapReduce、Bigtable又被称为“三驾马车”，是大数据之路的敲门砖，值得每个大数据从业人员了解和学习。

Hadoop生态中的HDFS提供了数据存储，Hive提供了SQL语言查询Hadoop集群中的数据。Hive的出现大大降低了编写数据查询代码的难度，Hive目前仍是业界实现数据仓库主要用到的组件。