qq_42139963的博客

MapReduce参考：https://www.cnblogs.com/lixiansheng/p/8942370.htmlhttps://baike.baidu.com/item/MapReduce/133425?fr=aladdin概念MapReduce是面向大数据并行处理的计算模型，用于大规模数据集的并行计算。它提供了一个庞大但设计精良的并行计算软件框架，能自动完成计算任务的并行化处理，自动划分计算数据和计算任务，在集群节点上自动分配和执行任务以及收集计算结果，将数据分布存储、数据通信、

HDFS（一）参考：http://hadoop.apache.org/docs/r1.0.4/cn/hdfs_design.htmlhttps://www.cnblogs.com/zsql/p/11587240.htmlHadoop Distribute File System：Hadoop分布式文件系统，Hadoop核心组件之一，作为大数据生态圈最底层的分布式存储服务而存在。架构架构图：主从结构一个HDFS集群是由一个Namenode和一定数目的Datanides组成。Nameno