HBASE笔记二 Get和Put

最新推荐文章于 2024-05-06 23:47:34 发布

最新推荐文章于 2024-05-06 23:47:34 发布 · 142 阅读

文章标签：

#hbase #get #set #操作过程

hbase 专栏收录该内容

76 篇文章

订阅专栏

本文介绍了HBase中数据的获取流程，包括首次访问rowkey时的加载与缓存机制，以及通过StoreFile读取数据的过程。此外，还详细解释了数据存储机制，涉及WAL的使用、MemStore的工作原理及其如何触发数据刷新到磁盘。

Get 取数据过程

load and cached （只有第一次访问此rowkey）	访问（-Root-）获取zookeeper的host
	访问（-META-）获得regionServer，（-META-包含每个rowkey所在region srver）
有缓存时	使用StoreFile读取数据

Put 存储数据

WAL

包含Sequence File，HLogKey实例

数据为Sequential number（可让数据Put有序化）和实际数据

MemStore

当MemStore满（由hbase.hregion.menstore.flush.size配置，默认64M）

会起个线程，将数据转移到disk上（hdfs）

HFile hdfs

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

blackproof

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

hbase java操作api - Append，Incr自增，batchCallback，batch(put，delete，append可同时使用)的使用

小哇

09-13

1423

代码示例有很多的代码是重复的，只是为形成记忆，见谅，另外需要将 hbase-site.xml,hdfs-site.xml,core-site.xml三个文件放到Resources上目录中 import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.*; import org.apache.hadoop.hbase.client.*; import org.apache.hadoop.hbase.client

Hbase学习笔记二（增删改查&过滤器）

qq_55906442的博客

06-17

1199

本文仅仅是个人的学习笔记记录！目录创建表增删改查过滤器行键过滤器列族与列过滤器值过滤器其他过滤器创建数据库表的命令：create '表名', '列族名1','列族名2','列族名N' 增增加数据：put‘表名’, ‘rowKey’, ‘列族 : 列’ , '值' 删删除某个记录:delete‘表名’,‘行名’,‘列族：列' 删除整行记录:deleteall '表名','rowkey' 清空表中所有的记录:truncate '表名' 删除表,先要屏蔽该表，才能对该表进行删除:

参与评论您还未登录，请先登录后发表或查看评论

HBase核心知识点总结

weixin_30914981的博客

09-01

426

一、HBase介绍 1、基本概念 HBase是一种Hadoop数据库，经常被描述为一种稀疏的，分布式的，持久化的，多维有序映射，它基于行键、列键和时间戳建立索引，是一个可以随机访问的存储和检索数据的平台。HBase不限制存储的数据的种类，允许动态的、灵活的数据模型，不用SQL语言，也不强调数据之间的关系。HBase被设计成在一个服务器集群上运行，可以相应地横向扩展。 2、HBase使用场景和...

Hbase源码分析3-从Put到HFile

云计算?

07-26

169

Hbase插入数据的过程大致是：客户端提交请求给region server（这中间会有作一些缓存） region server接收到请求，判断其实put请求，将其put到memstore 每次memstore的操作，都会检查memstore是否操作一个阈值，如果超过，就开始执行flush()，这个flush其实就是从内存中的KeyValue对持久化到HStore（也就是HFile）上面好...

一起学HBase——总结HBase中的PUT、GET、DELETE操作

weixin_30492601的博客

10-24

1652

传统的关系型数据库有CRUD增删改查操作，同样对于NoSQL列式数据库也有CRUD操作。本文对HBase中常用的Scan、GET、PUT、DELETE操作的用法做个总结。 Put操作 Put相当于传统数据库的add操作，就是在数据库中添加一条或多条记录。 Put操作分为两类，一类是一次操作一条记录，另外一类是一次操作多条数据。 HBase提供一个Put类，通过该类的对象就可以在HBase...

【甘道夫】HBase基本数据操作详解【完整版，绝对精品】

甘道夫的大数据进化论

07-16

2万+

【甘道夫】HBase基本数据操作详解【完整版，绝对精品】

Hbase笔记 —— 利用JavaAPI的方式操作Hbase数据库（往hbase的表中批量插入数据）.pdf

12-16

admin.getTable(TableName.valueOf("testAPI")).put(put); ``` 对于批量插入，我们可以读取文件中的数据，然后创建多个`Put`对象并将它们添加到批处理队列中： ```java List<Put> puts = new ArrayList(); ...

hbase学习笔记

07-18

- `put`命令用于向表中插入数据，需提供Row Key、列族和列名以及值。 - `get`命令用于根据Row Key获取数据。 - `scan`命令用于扫描表中的一部分或全部数据。 - `delete`命令用于删除数据。 - `disable`和`...

03.hadoop上课笔记之java编程和hbase

05-31

Hadoop 上课笔记之 Java 编程和 HBase Hadoop 是一个分布式计算框架，HBase 是基于 Hadoop 的一个分布式数据库系统。下面是 Java 编程和 HBase 相关的知识点：一、HBase 主要类和接口 1. Admin 类：用于建立...

大数据技术-HBase学习笔记

xiaoyixiao_的博客

02-24

1159

大数据技术-HBase学习笔记

hbase java 基本操作_HBase基本操作-java api

weixin_42304279的博客

02-13

578

上次将了HBase搭建完成后,一些Shell的使用,现在我们将了解一下HBase的代码控制,我使用的是java8以及hbase2.1.1版本首先你的集群已经是搭建完成了,然后这次我使用的是IDEA,我们需要将集群上的hbase-site.xml和hdfs-site.xml以及日志配置文件下载下来,放入根目录,如下准备好这些,还需要你配置好机器的maven环境,下面是用到的pom文件junitjun...

HBase - 正确的Put方法

Sha0w的博客

11-23

9536

最近在做Hbase的一些操作，目的是利用Hbase建立一个支持高效地理索引的空间数据库，在实践中发现了一些问题，特地来这边记录下 Put的方法：本人的实验场景是Hbase 1.2.1 + Hadoop 2.6.3，算是比较新的版本了。在最初学习Hbase是利用《Hbase实战》这本小人书，但是书上所提到的方法是利用HTable或者HTablePool等已经被弃用的方法，在这里依照1.2.1的版本总结

HBase基本数据操作详解

一个北漂的程序猿

01-15

762

文章目录概述使用命名空间Namespace命名空间管理预定义的命名空间创建表删除表修改表新增、更新数据Put常用构造函数常用方法实例代码删除数据Delete构造函数常用方法实例代码获取单行Get构造函数常用方法实测代码获取多行Scan常用构造函数常用方法实测代码概述对于建表，和RDBMS类似，HBase也有namespace的概念，可以指定表空间创建表，也可以直接创建表，进入default表空...

Hbase 常用shell操作