Hbase HregionServer Hregion Hmaser

本文介绍了HBase的服务体系结构,包括Hregion服务器集群和Hmaster主服务器。详细讲解了Hregion的工作原理,如数据是如何从Hadoop的分布式文件系统加载的;Hmemcache作为内存中的缓存保存最新数据;Hlog作为磁盘上的操作记录文件,记录所有更新操作;以及Hregion如何定期调用flushcache()将缓存写入文件。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

由Hregion服务器集群和Hmaster主服务器构成HBase的服务体系结构,

1,Hregion:通常情况下每个表被拆分成很多个块,其中的每一块就是Hregion,一张表保存在多个Hregion中,每个Hregion保存某段连续的数据,从开始主键(startRow)到结束主键(endRow)

通过Hregion从Hadoop的分布式文件系统上数据


2,Hmemcache:内存中的缓存,保存着最近更新的数据,如果Hmemcache没有数据,将从hstores获取磁盘上的数据,每个列簇会有一个hstore集合,每个集合包含多个Hstorefiles文件(b+数结构)


3,Hlog:磁盘上的操作记录文件,记录这所有的更新操作,数据写入Hlog后,commit()调用才会返回给客户端。

数据的更新操作最先被记录在Hmemcache和Hlog中


4,Hregion定期调用flushcache()缓存里的内容写入到文件中,每次调用产生一个新的文件Hstorefile文件,从一个hstore或数据会访问所有的Hstotefile,很耗时吧

hstore.compact可以完成小文件到达文件的合并

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值