- 博客(3)
- 收藏
- 关注
原创 MapReduce
MapReduce原理 4.1.1 MapReduce概述 MapReduce工作原理为:MapReduce是一种编程模型,用于大规模数据集的并行运算。MapReduce采用”分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。 MapReduce是什么:MapReduce是一种分布式计算框架 ,以一种可靠的,具有容错能力的方式并行地处理上TB级别的海量数据集。主要用于搜索领域,解决海量数据的计算问题。 MR有两个阶段组成:Ma
2020-11-03 10:39:00
161
原创 2020-11-03
MapReduce原理 4.1.1 MapReduce概述 MapReduce工作原理为:MapReduce是一种编程模型,用于大规模数据集的并行运算。MapReduce采用”分而治之”的思想,把对大规模数据集的操作,分发给一个主节点管理下的各个分节点共同完成,然后通过整合各个节点的中间结果,得到最终结果。 MapReduce是什么:MapReduce是一种分布式计算框架 ,以一种可靠的,具有容错能力的方式并行地处理上TB级别的海量数据集。主要用于搜索领域,解决海量数据的计算问题。 MR有两个阶段组成:Ma
2020-11-03 10:12:28
154
原创 实训作业
实训作业 自我介绍 我是来自兰州文理学院的人生,于数字媒体学院学习数据科学与大数据技术专业,作为一名大一新生,通过一次次地专业学习,我不断对这门学科有着新的理解,在专业学习中,我深刻的理解了将来发展的轨迹。 对大数据的认识 在现在我们面临着更多的机遇和挑战,大数据的发展在高速的进行。通过这段时间的学习,我将大数据分为三个层面:理论,技术和实践。在现在和未来,大数据对我们的影响是巨大的,等大数据时代彻底来临,我们的生活,工作将会有天翻地覆的变化。正因为大数据时代的到临,我们所处的环境变得丰富多元
2020-07-18 15:18:07
194
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人