
Hadoop
Think-More
这个作者很懒,什么都没留下…
展开
-
Hadoop(一)HDFS的工作原理
一、简介HDFS(Hadoop Distributed File System )Hadoop分布式文件系统。是根据google发表的论文翻版的。论文为GFS(Google File System)Google 文件系统。二、HDFS特点 ①保存多个副本,且提供容错机制,副本丢失或宕机自动恢复。默认存3份。 ②运行在廉价的机器上。 ③适合大数据的处...转载 2019-05-30 09:51:09 · 283 阅读 · 0 评论 -
Hadoop(二)Hive原理解析
一、Hive的起源Hive起源于Facebook(一个美国的社交服务网络)。Facebook有着大量的数据,而Hadoop是一个开源的MapReduce实现,可以轻松处理大量的数据。但是MapReduce程序对于Java程序员来说比较容易写,但是对于其他语言使用者来说不太方便。此时Facebook最早地开始研发Hive,它让对Hadoop使用SQL查询(实际上SQL后台转化为了MapReduc...转载 2019-06-30 22:41:03 · 1552 阅读 · 0 评论 -
Hadoop(三)HBase原理解析
HBase定义HBase 是一个高可靠、高性能、面向列、可伸缩的分布式存储系统,利用Hbase技术可在廉价PC Server上搭建 大规模结构化存储集群。 HBase 是Google Bigtable 的开源实现,与Google Bigtable 利用GFS作为其文件存储系统类似, HBase 利用Hadoop HDFS 作为其文件存储系统;Google 运行MapR...转载 2019-06-30 22:41:17 · 235 阅读 · 0 评论