HBase进阶学习

M_Ene

于 2021-06-09 20:50:55 发布

阅读量289

点赞数

分类专栏：大数据文章标签： hbase 数据库

本文链接：https://blog.youkuaiyun.com/qq_42320346/article/details/117753535

版权

本文详细介绍了HBase的RegionServer架构，包括StoreFile、MemStore、WAL和BlockCache的工作原理。接着，阐述了HBase的写流程、读流程，以及重要的MemStore Flush过程。同时，讲解了StoreFile Compaction的目的和类型，以及Region Split的触发条件，帮助读者深入掌握HBase的内部机制。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

RegionServer架构

在这里插入图片描述
1）StoreFile
保存实际数据的物理文件，Store以Hfile的形式存储在HDFS上。每个Store都会有一个或者多个StoreFile（HFile），数据在每个StoreFile中都是有序的。
2）MemStore
写缓存，由于HFile中的数据要求是有序的，所以数据是先存储在MemStore中，排好序之后，等到达刷写时机才会刷写到Hfile，每次刷写都会形成一个新的HFile。
3）WAL
由于数据要经过MemStore排序之后才能刷写到HFile，但是把数据保存在内存中会有很高的概率导致数据的丢失，为了解决这个问题数据会先卸载一个叫做write-Ahead logfile的文件中，然后再写入MemStore中，所以在系统出现故障的时候数据可以通过这个日志文重建。
4）BlockCache
读缓存，每次查询出的数据会缓存在BlockCache中，方便下次查询。