hbase架构及hbase的读写过程_hbase溢写-优快云博客

本文链接：https://blog.youkuaiyun.com/zengxianglei/article/details/94356879

本文深入探讨了HBase的架构原理及其读写过程，详细解释了客户端如何通过Zookeeper定位到元数据表（meta表）和数据区域（Region），以及数据是如何在HLog、MemStore和StoreFile间流动的。同时，文章还介绍了Region分裂和合并的触发条件。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

hbase架构及hbase的读写过程

Hbase
写过程
Client访问ZK，根据ROOT表获取meta表所在Region的位置信息，并将该位置信息写入Client Cache。
（注：为了加快数据访问速度，我们将元数据、Region位置等信息缓存在Client Cache中。）

Client读取meta表，再根据meta表中查询得到的Namespace、表名和RowKey等相关信息，获取将要写入Region的位置信息（此过程即Region三层定位，如下图），最后client端会将meta表写入Client Cache。

Client向上一步HRegionServer发出写请求，HRegionServer先将操作和数据写入HLog（预写日志，Write Ahead Log，WAL），再将数据写入MemStore，并保持有序。
（联想：HDFS中也是如此，EditLog写入时机也是在真实读写之前发生）

当MemStore的数据量超过阈值时，将数据溢写磁盘，生成一个StoreFile文件。
当Store中StoreFile的数量超过阈值时，将若干小StoreFile合并（Compact）为一个大StoreFile。
当Region中最大Store的大小超过阈值时，Region分裂（Split），等分成两个子Region。
在这里插入图片描述
region 三层定位
读过程
获取将要读取Region的位置信息（同读的1、2步）。
Client向HRegionServer发出读请求。
HRegionServer先从MemStore读取数据，如未找到，再从StoreFile中读取。