
大数据
大数据相关文章
半路笙歌
一只想成为老鸟的菜鸟
展开
-
hadoop-hdfs学习1
简介 HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统(中文,英文)。 HDFS有很多特点: ① 保存多个副本,且提供容错机制,副本丢失或宕机自动恢复。默认存3份。 ② 运行在廉价的机器上。转载 2017-04-19 17:07:06 · 273 阅读 · 0 评论 -
hadoop-MapReduce
Hadoop简介 Hadoop就是一个实现了Google云计算系统的开源系统,包括并行计算模型Map/Reduce,分布式文件系统HDFS,以及分布式数据库Hbase,同时Hadoop的相关项目也很丰富,包括ZooKeeper,Pig,Chukwa,Hive,Hbase,Mahout,flume等. 这里详细分解这里面的概念让大家通过这篇文章了解到底是什么hadoop:转载 2017-04-19 18:01:13 · 432 阅读 · 0 评论 -
Hadoop-YARN(资源管理系统)
转:http://www.cnblogs.com/sy270321/p/4398703.html YARN (Yet Another Resource Negotiator另一种资源协调者)Apache Hadoop Yarn是 Hadoop MRv2计算机框架中构建的一个独立的、通用的资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据转载 2017-04-25 18:43:43 · 1522 阅读 · 0 评论