Hbase hirachical structure

本文介绍了Hbase表结构,默认返回各列最新数据值,有指定个数和时间段两种历史版本记录回收方式。阐述了Table、Region、Regionserver等组件的功能及触发机制,如memstore刷写、storeFile合并等,还提及Hmaster的负载均衡、元数据管理,以及访问流程。

Hbase table structure

 


默认返回每个列的最新数据值

两种数据回收方式:

         对每个列指定个数的历史版本记录

         对每个列指定时间段内的历史版本记录

 

 

Table

         Region(Hmaster实现映射到region server)

         Regionserver

                   Store

                  {memStore( trigger 1.累积到阈值时 Region server 将memstore刷到storeFile中)

                            storeFile ->Hfile on hdfs (trigger 2.累积到阈值时合并成大storeFile,同时进行数据清除)

 }

         trigger 3.当大storeFile累计到阈值时,把当前Region分割成两个regions由Hmaster分配Region实现负载均衡

 

Hmaster

         将Region分配给Regionserver

         将失效的regions重分配   ->  负载均衡

         Metadata management

         故障时通知zookeeper并处理相应的 log文件

 

HRegionServer

         负责所有region的读写请求

 

Region

         structure



    附上region的structure

         Metadata存储于.META.表中

         会分裂成多个region

         存储于-ROOT- 表中

         Zookeeper记录-ROOT-表位置

访问流程

                  Zookeeper-> -ROOT-  ->  .META. 

                  
  



 


源码地址: https://pan.quark.cn/s/d1f41682e390 miyoubiAuto 米游社每日米游币自动化Python脚本(务必使用Python3) 8更新:更换cookie的获取地址 注意:禁止在B站、贴吧、或各大论坛大肆传播! 作者已退游,项目不维护了。 如果有能力的可以pr修复。 小引一波 推荐关注几个非常可爱有趣的女孩! 欢迎B站搜索: @嘉然今天吃什么 @向晚大魔王 @乃琳Queen @贝拉kira 第三方库 食用方法 下载源码 在Global.py中设置米游社Cookie 运行myb.py 本地第一次运行时会自动生产一个文件储存cookie,请勿删除 当前仅支持单个账号! 获取Cookie方法 浏览器无痕模式打开 http://user.mihoyo.com/ ,登录账号 按,打开,找到并点击 按刷新页面,按下图复制 Cookie: How to get mys cookie 当触发时,可尝试按关闭,然后再次刷新页面,最后复制 Cookie。 也可以使用另一种方法: 复制代码 浏览器无痕模式打开 http://user.mihoyo.com/ ,登录账号 按,打开,找到并点击 控制台粘贴代码并运行,获得类似的输出信息 部分即为所需复制的 Cookie,点击确定复制 部署方法--腾讯云函数版(推荐! ) 下载项目源码和压缩包 进入项目文件夹打开命令行执行以下命令 xxxxxxx为通过上面方式或取得米游社cookie 一定要用双引号包裹!! 例如: png 复制返回内容(包括括号) 例如: QQ截图20210505031552.png 登录腾讯云函数官网 选择函数服务-新建-自定义创建 函数名称随意-地区随意-运行环境Python3....
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值