- 博客(5)
- 收藏
- 关注
原创 HBase介绍 HBase和HDFS的联系 HBase和RDBMS的联系
Hbase是建立在Hadoop 文件系统()之上的分布式数据库.运行在Hadoop 集群上的Apache 开源数据库。它属于管理系统HBase可以处理大量数据,可以从Hadoop实时写入/读取数据HBase数据以二进制存储在HDFS上HDFS和HBaseHDFS和Hbase都可以结构化、半结构化和非结构化数据HDFS缺少内存中的处理引擎使用普通的MapReduceHBase有较快的读/写速度。
2022-11-04 16:37:49
1639
原创 Hadoop架构组成
主要由 ResourceManager 、 NodeManager 、Applica- tionMaster(MRAppMstr/MPIAppMstr)和 Container等组件构成。HDFS的管理者,接受并处理Client向Hadoop发送请求以及接收来自DataNode的周期性的信息。全局资源管理器,对每个 NodeManager上的资源进行统一管理和调度。切分文件:文件上传HDFS的时候,将文件切成一个个Block再进行存储。根据容量、队列等条件将系统的资源分配给运行的应用程序(纯调度器)
2022-10-28 14:57:22
1689
原创 大数据基础入门 一
由Apache基金会所开发的分布式系统基础架构(受到Map/Reduce和Google File System(GFS)的启发)
2022-10-19 15:28:13
657
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人