
云计算与大数据
闫二白
单身汪一枚
展开
-
HBase总结
HBase简介 http://hbase.apache.org/ HBase是一个高可靠性、高性能、面向列、可伸缩、 实时读写的分布式数据库,该技术来源于 Fay Chang 所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统(File System)所提供的分布式数据存储一样,HBase在Hadoop之上提供了类似于Big...原创 2019-12-04 19:39:04 · 395 阅读 · 0 评论 -
hadoop总结
Hadoop简介:http://hadoop.apache.org 1. 组成 分布式文件存储系统HDFS (Hadoop Distributed File System )POSIX 分布式存储系统 提供了 高可靠性、高扩展性和高吞吐率的数据存储服务 分布式计算框架MapReduce 分布式计算框架(计算向数据移动) 具有 易于编程、高容错性和高扩展性等优点。 分布式资源管理框架YARN(Yet...转载 2019-07-09 21:40:50 · 287 阅读 · 0 评论 -
伪分布式 完全分布式的搭建
伪分布式的搭建 (single node setup) 伪分布式运行模式 这种模式是在一台单机上运行,但用不同的Java进程模仿分布式运行中的各类结点。 从分布式存储的角度来说,集群中的结点由一个NameNode和若干个DataNode组成,另有一个SecondaryNameNode作为NameNode的备份。 从分布式应用的角度来说,集群中的结点由一个JobTracker和若干个Task...原创 2019-08-03 23:37:38 · 420 阅读 · 0 评论