HBase分析之Region定位

最新推荐文章于 2022-03-23 23:01:42 发布

MasaWong

最新推荐文章于 2022-03-23 23:01:42 发布

阅读量3k

点赞数

CC 4.0 BY-SA版权

分类专栏：大数据文章标签： hbase region 定位

本文链接：https://blog.youkuaiyun.com/MasaWong/article/details/78430008

本文详细介绍了HBase Region的定位流程，包括客户端发起定位、查询hbase:meta表、定位hbase:meta表以及获取Region信息的过程。在现代HBase中，不再依赖-ROOT-表，而是直接通过ZooKeeper获取META表位置，简化了流程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

以前的理论是：客户端向ZooKeeper请求 -ROOT- 表的位置，然后通过 -ROOT- 表找 META 表的位置，再通过 META 表定位到Region Server位置。但这个理论已经过时了， -ROOT- 表已经消失在历史的尘埃中。

现在的ZooKeeper直接缓存了 META 表所在的位置信息（本质是一样的，只是这跳过了 -ROOT- 表，这个过程本来就很多余。。），可以直接通过ZooKeeper获取 META 表的位置，后续流程也还是一样的。因为限定了 META 表不可分割，只能存在一个Region，所以存储他的Region Server一定只有一个。下面看看具体怎么定位的。

定位流程

1. 发起定位

客户端向服务端发起请求时，会先去定位存储数据的Region位置，代码在HConnectionImplementation#locateRegion方法里。

@Override
public RegionLocations locateRegion(final TableName tableName,
  final byte [] row, boolean

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

MasaWong

关注关注

0
点赞
踩
4

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

2021SC@SDUSC HBase(六)项目代码分析——Region机制（三）之Region定位

weixin_45865669的博客

10-31

2265

目录一、初步认识region定位Meta表Region定位Region定位总结一、初步认识region定位在 HBase 中，表的所有行都是按照 RowKey 的字典序排列的，表在行的方向上分割为多个分区（Region），如下图所示。每张表一开始只有一个 Region，但是随着数据的插入，HBase 会根据一定的规则将表进行水平拆分，形成两个 Region。当表中的行越来越多时，就会产生越来越多的 Region，而这些 Region 无法存储到一台机器上时，则可将其分布存储到多台机器上。 Meta表

中信所分区查询_HBase Region分区及定位

weixin_35197990的博客

01-04

3870

在 HBase 中，表的所有行都是按照 RowKey 的字典序排列的，表在行的方向上分割为多个分区（Region），如下图所示。每张表一开始只有一个 Region，但是随着数据的插入，HBase 会根据一定的规则将表进行水平拆分，形成两个 Region。当表中的行越来越多时，就会产生越来越多的 Region，而这些 Region 无法存储到一台机器上时，则可将其分布存储到多台机器上。Master ...

参与评论您还未登录，请先登录后发表或查看评论

HBase中的Client如何路由到正确的RegionServer

Make Progress Everyday!

04-13

2448

HBase中的Client如何路由到正确的RegionServerPosted onJuly 27, 2010byHarry_Ding<br />在HBase中，大部分的操作都是在RegionServer完成的，Client端想要插入，删除，查询数据都需要先找到相应的RegionServer。什么叫相应的RegionServer？就是管理你要操作的那个Region的RegionServer。Client本身并不知道哪个RegionServer管理哪个Region，那么它是如何找到相应的RegionServe

HBase源码阅读（三）如何定位region

东东儿的博客

03-23

3354

上一篇文章中介绍了HTable中读写数据的逻辑，本篇介绍一下client如何在hbase集群中定位到需要的region。先介绍一下大致原理，1.2版本中的所有region布局信息被存放在meta表中，meta表永不分裂，仅有一个region，meta表的的位置被存放在zk中，所以client想要找到一个region的位置，需要先访问zk，找到meta表的位置，然后在meta表中查询到自己需要访问的region的信息。 meta表中信息如下图所示（图片引用自《HBase原理与实践》）：可以看到，meta表

HBase查询机制--Region定位

Fys的博客

03-12

3733

旧版本： region是HBase架构的关键，大部分的工作都围绕着region展开。在0.96.0版本之前，region的查询通过三层架构来定位： Region：就是所需要查询的数据具体所在的Region .META. :元数据表，存储了所有region的简要信息。.META.表中的一行记录就是一个Region，该行记录了该Region的起始行，结束行，和该Region的连接信息，这样客户端就可以...

HBase region 定位原理

Kuzury

07-18

3871

在Hbase中，大部分的操作都是在RegionServer完成的，Client进行插入，删除，查询数据都需要先找到相应的RegionServer。什么叫相应的RegionServer？就是管理你要操作的那个Region的RegionServer。Client本身并不知道哪个RegionServer管理哪个Region，那么它是如何找到相应的RegionServer的？如上图所示为HBase的存储架构

HBase源码分析之Region定位

辰辰爸的博客

03-16

6924

我们知道，HBase是一个基于RowKey进行检索的分布式数据库。它按照行的方向将表中的数据切分成一个个Region，而每个Region都会存在一个起始行StartKey和一个终止行EndKey。Region会最终选择一个RegionSever上线，并依靠RegionSever对外提供数据存取服务。那么，HBase是如何实现数据的检索，也就是它如何将需要读写的行Row准确的定位到其所在Region和RegionServer上的呢？本文，我们就将研究下HRegion的定位。

HBase之Region切分原理

heima201907的博客

10-30

802

HBase之Region切分原理 Region自动切分是HBase能够拥有良好扩张性的最重要因素之一，也必然是所有分布式系统追求无限扩展性的一副良药。HBase系统中Region自动切分是如何实现的？这里面涉及很多知识点，比如Region切分的触发条件是什么？Region切分的切分点在哪里？如何切分才能最大的保证Region的可用性？如何做好切分过程中的异常处理？切分过程中要不...

Region 定位(1)

初阳

04-19

2039

Region的定位 Region就是HBase架构的灵魂。 Client在读写的时候是怎么定位到RegionServer的？？？三层查询架构关于Region的查找，0.96.0版本之前是被称为三层查询架构配图5-13 Region：就是要查找的数据所在的Region，这个不多解释。 .META.：是一张元数据表，它存储了所有Region的简要信息。.META.表中的一行记录就是...

HBase的Region定位

热门推荐

MingYueZh的博客

06-28

1万+

Region定位：系统如何找到某个row key (或者某个 row key range)所在的region关于Region的查找，早期的设计（0.96.0）之前是被称之为三层查询架构，如下图所示：Region：就是要查找的数据所在的Region.META.：是一张元数据表，记录了用户表的Region信息以及RegionServer的服务器地址，.META.可以有多个regoin。.META.表中...

Hbase的Region的三次定位分析

Peter_Changyb的博客

09-19

766

Hbase源码分析（七）Region定位（下）2021SC@SDUSC

qq_45856546的博客

11-08

1846

文章目录前言介绍总结前言上篇文章讲述了 Region定位的过程，本篇继续，针对其中的几点，做一些细节方面的介绍。介绍一.从缓存中看看是否我们已经有该Region的getCachedLocation()方法首先我们看下从缓存中看看是否我们已经有该Region的getCachedLocation()方法，代码如下： /** * Search the cache for a location that fits our table and row key. * Return nul..

HBase——关于Region

04-05

9029

Region Region是HBase数据管理的基本呢单位。数据的move,数据的balance，数据的split，都是按照region来进行操作的。 region中存储这用户的真实数据，而为了管理这些数据，HBase使用了RegionSever来管理region。寻址过程数据寻址的一般过程如下，请参照： zookeeper

Hbase Region定位

草根聪的生活

04-13

1984

Hbase Region定位 2017年3月4日 15:36 获取每个table的row对应的locate，具体实现如下： 1、调用locateRegionInMeta函数，首先查找cache中是否有table对应的row，比较缓存中的Table对应的startkey与endkey，判断row是否在某个region中；若能找到，直接返回该regionlcation信息 2、若

HBase源码系列（二）Client如何找到正确的Region Server

走向程序的康庄大道

11-07

788

Client 定位 RegionServer流程图 Client定位Region Server过程Client 定位 RegionServer流程图Client定位Region Server过程这里我们首先要讲hbase的两张元数据表-ROOT-和.META.表，它们一个保存着region的分部信息，一个保存着region的详细信息。在《hbase实战》这本书里面详细写了查找过程总共有8步：

hbase快速入门之---region定位过程

Java_Soldier的博客

12-12

1万+

客户端访问数据的流程： HBase Client -> Zookeeper -> -ROOT- -> .META. -> 用户数据表其中会有多次网络操作，不过client端有cache缓存。 ØZookeeper Zookeeper中记录了-ROOT-表的location。 Ø-ROOT- 表包含.META.表所在的region列表，该表只会有一个Region； Ø.META.

Hbase源码分析（五）Region定位（上）2021SC@SDUSC

qq_45856546的博客

10-29

1218

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录前言2.读入数据总结前言 HBase是一个基于RowKey进行检索的分布式数据库。它按照行的方向将表中的数据切分成一个个Region，而每个Region都会存在一个起始行StartKey和一个终止行EndKey。Region会最终选择一个RegionSever上线，并依靠RegionSever对外提供数据存取服务。那么，HBase是如何实现数据的检索，也就是它如何将需要读写的行Row准确的定位到其所在Region和RegionS

Hbase的Region详解以及hbase写操作的实现

heihei2017的博客

09-19

1352

Hbase的Region介绍每个Region负责一小部分Rowkey范围的数据的读写和维护，Region包含了对应的起始行到结束行的所有信息。master将对应的region分配给不同的RergionServer，由RegionSever来提供Region的读写服务和相关的管理工作。这部分主要介绍Region实例以及Rgeion的寻找路径： 1、region实例上图模拟了一个Hbas...

HBase RegionLoad获取Name乱码问题的源码分析与解决方式

程序员进阶之路

11-04

1554

通过RegionLoad可以获得一系列有关Region负载的详细信息，但是因为需要通过regionName与HRegionInfo中的regionName匹配，从而合并相关信息（保存的时候没有保存字节数组的regionName，太长了并且不直观，同时还需要clusterName信息，以保证其唯一性），所以也正因为如此，才带来了标题中的问题。由于每次抓取的Region数量在一两万左右，所