Hbase 查询为什么快

Hbase查询速度快主要得益于数据分区存储和高效的数据格式。数据按rowkey定位到特定region,利用location cache提高访问效率,并可通过独立meta server避免meta表查询瓶颈。HFile V2的分块和索引结构,结合Bloomfilter与多种过滤器,减少查找次数并优化随机读取性能。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

第一、数据分区存储(region)

  通过rowkey可以快速地位到在那个region上,位置信息保存在hbase的meta表里。

 每次查询都会有location cache的,所以htable里面的Hconnection 初始化的时候访问速度相对来说稍慢,客户端缓存截图如下。

 随着数据越来越大,meta表的查询有可能遇到瓶颈,建议单独独立出成一个meta server。

(备注:一个meta表的一条记录大概为1k)。

 

第二、hbase的数据格式 HFile V2 (HFile V1代码已经出hbase版本删除了)




B、查询数据block的次数和HFile内部数据分开+索引分块


   

1、bloomfilter改进查找次数

2、hbase的三维顺序,按照rowkey,column,ts进

评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值