本文深入探讨了HBase的数据存储结构，包括HRegionServer、HStore及其内部的MemStore和StoreFile，以及KeyValue的存储格式。HRegionServer管理HRegion，每个Region由多个HStore组成，每个HStore对应一个Column Family。数据首先写入MemStore，满后Flush为StoreFile，经过Compact合并和Split操作。HFile是数据的主要存储格式，支持压缩，包含Data Block、Meta Block等段。KeyValue结构中包含了RowKey、Column Family、Qualifier、Timestamp和Key Type等信息。HLog文件作为WAL，记录所有修改操作，确保数据一致性。
HBase的数据文件都存储在HDFS上，格式主要有两种:
- HFile:HBase中KeyValue数据的存储格式，HFile是Hadoop的二进制文件，实际上StoreFile就是对HFile做了轻量级的包装，即StoreFile底层就是HFile
- HLog File:HBase中WAL(Write Ahead Log)的存储格式，物理上是Hadoop的Sequence File带项目符号的内容

- HRegionServer管理一些列HRegion对象
- 每个HRegion对应Table中一个Region,Hegion由多个HStore组成
- 每个HSt
2090
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
超级会员免费看
订阅专栏 解锁全文
扫一扫
