HBase数据模型的一些概念

最新推荐文章于 2022-09-03 12:17:49 发布
最新推荐文章于 2022-09-03 12:17:49 发布
阅读量1.2k 收藏 1
点赞数
CC 4.0 BY-SA版权
分类专栏： 非关系型数据库 大数据 文章标签： hadoop hbase 分布式 存储 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/lhc1105/article/details/53561136
本文介绍了HBase的数据模型，包括表、行健、列族和单元格的概念。HBase作为一种列式存储的分布式数据库，其数据模型对于理解其存储和查询机制至关重要。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >


首先来先理解一个概念：HBase是一种列式存储的分布式数据库。

表

             在HBase中数据以表的形式存储。使用表的主要原因是把某些列组织起来一起访问，同一个表中的数据通常是相关的，通过列族进一步把一些列组织起来一起访问。用户可以通过命令行或者Java API来创建表。表明通常使用Java Stirng 类型或者byte数组表示，表名作为HDFS存储路径的一部分来使用，因此必须要符合文件名规范，所以构成表名的字符是有限制的。可以直接查看底层存储系统，在HDFS中可以看到每个表的表名都作为独立的目录结构，在某些情况下，用户可能需要查看这部分信息。

      虽然理论上HB
了解本专栏 订阅专栏 解锁全文 超级会员免费看
HBase数据模型详解：大数据存储的最佳实践
AI天才研究院
05-19 1083
本文旨在为大数据开发者和架构师提供关于HBase数据模型的全面指南。我们将深入探讨HBase的核心数据模型设计，包括其独特的存储结构和访问模式，并分享在大规模生产环境中使用HBase的最佳实践。文章首先介绍HBase的基本概念和背景，然后深入解析其数据模型的核心组件。接着我们将探讨HBase的底层存储机制和架构设计，并通过实际代码示例展示如何使用HBase API。最后，我们将讨论性能优化策略和实际应用场景。HBase：一个开源的、分布式的、面向列的NoSQL数据库，构建在HDFS之上Region。
HBase的数据模型
my_study_notes的博客
09-29 2337
逻辑上，HBase的数据模型同关系型数据库很类似，数据也是存储在一张表中，由行和列。但HBase的底层物理存储结构是Key-Value模式。
HBase基础：HBase的数据模型
把伤痕当酒窝
10-12 463
NameSpace 命名空间，类似于关系型数据库的 DatabBase 概念，每个命名空间下有多个表。HBase 有两个自带的命名空间，分别是 hbase 和 default，hbase 中存放的是 HBase 内置的表， default 表是用户默认使用的命名空间。 Region 类似于关系型数据库的表概念。不同的是，HBase 定义表时只需要声明列族即可，不需 要声明具体的列。这意味着，...
HBase的核心概念
haveysun的专栏
02-12 1510
HBase是hadoop领域的数据库。因为处理海量数据，并且底层依赖于hadoop。 最大的特点是对海量数据(TB到PB级别)进行毫秒级查询。 HBase逻辑结构特点： 1.NoSQL数据库，并不是严格意义上的关系型数据库。    SQL语言的特点决定了关系型数据库的结构。底层是关系代数。按行进行存储的，表中的数据会进行格式化，    字段的类型，格式都是固定的，结构化的
HBase数据模型介绍
张俊杰 的博客
11-16 1660
逻辑上，HBase的数据模型同关系型数据库很类似，数据存储在一张表中，有行有列。但从HBase的底层物理存储结构（K-V）来看，HBase更像是一个multi-dimensional map (一个key 可以存多个value的版本)。 1．Name Space 命名空间 命名空间，类似于关系型数据库的database概念，每个命名空间下有多个表。HBase两个自带的命名空间，分别是hbase和default，hbase中存放的是HBase内置的表，default表是用户默认使用的命名空间。 一个表可以自由
HBase（一） 介绍 数据模型概念 rowkey
是个好男人的博客
05-13 1077
1.介绍 是 Apache Hadoop 的数据库，是建 立在 HDFS 之上，被设计用来提供高可靠性、高性能、列存储、可伸缩、多版本的 NoSQL 的分布式数据存储系统，实现对大型数据的实时、随机的读写访问。 特点： 它介于 NoSQL 和 RDBMS 之间，仅能通过主键(rowkey)和主键的 range 来检索数据 HBase 查询数据功能很简单，不支持 join 等复杂操作 不支持复杂的事务，只支持行级事务(可通过 hive 支持来实现多表 join 等复杂操作)。 .
HBase数据模型
小萌猿的博客
03-13 3056
HBase简介 – HBase – Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩、 实时读写的分布式数据库 – 利用Hadoop HDFS作为其文件存储系统,利用Hadoop MapReduce来处理 HBase中的海量数据,利用Zookeeper作为其分布式协同服务 – 主要用来存储非结构化和半结构化的松散数据（列存 NoSQL 数据库） 数据模型： 在使...
每日一知：HBase表的数据模型
Chenftli的博客
10-23 1503
HBase表的数据模型主要概念包括rowkey、Column Family、Column、cell、Timestamp。 1. rowkey行键 table的主键，table中的记录按照rowkey 的字典序进行排序 rowkey行键可以是任意字符串(最大长度是 64KB，实际应用中长度一般为 10-100bytes) 2. Column Family列族 被称为列族或列簇 HBase表中的每个列，都归属与某个列族 列族是表的schema的一部分(而列不是)，即建表时至少指定一个列族 比如创建一张表，
大数据入门：HBase数据模型详解
shuimuzh123的博客
12-03 6276
Hbase作为Hadoop生态当中的NOSQL数据库，基于HDFS去完成实际的数据存储任务，高性能是得到普遍的认可的。而Hbase在存储上的高性能，与自身的数据模型设计有很大的关系。今天的大数据入门分享，我们就来讲讲，Hbase数据模型的相关知识。 根据定义，我们知道Hbase是一个支持分布式的列式数据库，尤其是针对于大型数据的实时、随机的读写访问，Hbase能够提供很好的功能支持。 一、HBase的数据模型 Hbase的数据模型，我们需要从两个维度来理解，一是逻辑模型，二是物理模型。逻辑模型 H.
hbase源码系列（四）数据模型-表定义和列族定义的具体含义
weixin_34249678的博客
04-29 151
 　hbase是一个KeyValue型的数据库，在《hbase实战》描述它的逻辑模型【行键，列族，列限定符，时间版本】，物理模型是基于列族的。但实际情况是啥？还是上点代码吧。 　　　　 HTableDescriptor tableDesc = new HTableDescriptor("test"); //日志flush的时候是同步写，还是异步写 tabl...
Hbase基本概念
libaowenBlog的博客
09-03 5542
一、Hbase介绍 二、HBase 的特点是什么？ 三、Hbase的存储结构 四、HBase 读写流程？ 五、HBase表的数据模型 六. 热点现象（数据倾斜）怎么产生的，以及解决方法有哪些七、HBase的 rowkey 设计原则 八、HBase的列簇设计 九、 简述 HBase 中 compact 用途是什么，什么时候触发，分为哪两种，有什么区别，有哪些相关配置参数？
Hbase概述
weixin_43006131的博客
02-03 920
Hbase介绍 HBase 是基于Apache Hadoop 的面向列的 NoSQL 数据库，是Google 的 BigTable 的开源实现。 HBase 是一个针对半结构化数据的开源的、多版本的、可伸缩的、高可靠的、高性能的、分布式的和面向列的动态模式数据库。 HBase 和传统关系数据库不同，它采用了 BigTable 的数据模型增强的稀疏排序映射表（Key/Value），其中，键...
HBase列式数据模型简介
大数据基础学习
06-27 1685
数据模型是理解一个数据库的关键，本节介绍 HBase 的列式数据模型，与数据模型相关的基本概念，并描述 HBase 数据库的概念视图和物理视图。 数据模型概述 HBase 是一个稀疏、多维度、有序的映射表。 这张表中每个单元是通过由行键、列族、列限定符和时间戳组成的索引来标识的。每个单元的值是一个未经解释的字符串，没有数据类型。当用户在表中存储数据时，每一行都有一个唯一的行键和任意多的列。 ...
HBase数据模型、概念视图和物理视图
张波的技术积累
02-13 1万+
1：数据模型    HBase是一个类似Bigtable的分布式数据库，它是一个稀疏的长期存储的（存储在硬盘上）、多维度的、排序的映射表，这张表的索引 是行关键字、列关键字和时间戳，HBase中的数据都是字符串，没有类型。    用户在表格中存储数据，每一行都有一个可排序的主键和任意多的列。由于是稀疏存储，同一张里面的每一行数据都可以有截然不同的列。   列名字的格式是":"，都是由字符串
Hbase的基本概念：
Deng872347348的博客
01-06 1540
Hbase的基本概念： 文章目录Hbase的基本概念：单元格：时间戳（Timestamp）Hbase的数据模型数据模型-物理模型： Hbase的数据模型也是由一张张表组成，每张表里面也有数据行和列，但与关系型数据库稍微有不同， 关系型数据库的数据模型是由一张张表，每张表有数据行和列 行（row）,行键（Row Key） 每一行代表一个数据对象，每一行都是一个行键（Row Key）来进行唯一标识。 所有对表的访问都要通过Row Key Row Key 是任意字符串，即字节数组（最大长度是64K
HBase数据模型解析和基本的表设计分析
咕噜大大的专栏
04-25 3万+
最近在学习HBase的使用，并仔细阅读了一篇官方推荐的博客，在这里就以一边翻译一边总结的方式和大家一起梳理一下HBase的数据模型和基本的表设计思路。 官方推荐的博客原文地址：http://0b4af6cdc2f0c5998459-c0245c5c937c5dedcca3f1764ecc9b2f.r43.cf2.rackcdn.com/9353-login1210_khurana.pdf
Hbase原理、基本概念、基本架构
热门推荐
woshiwanxin102213的专栏
12-26 23万+
概述 HBase是一个构建在HDFS上的分布式列存储系统； HBase是基于Google BigTable模型开发的，典型的key/value系统； HBase是Apache Hadoop生态系统中的重要一员，主要用于海量结构化数据存储； 从逻辑上讲，HBase将数据按照表、行和列进行存储。 与hadoop一样，Hbase目标主要依靠横向扩展，通过不断增加廉价的商用服务器，来增加计算...
hbase定义一个列族
醉糊涂仙的博客
07-03 2130
Hregion对应Table的一个region Hregion对应多个HStore(即基于列族的存储) Hstore由两部分构成MemStore和StoreFile 数据先存入MemStore,当MemStore超过设定的阈值时,则flush一次到StoreFile中(即落地) 写数据时有的列族已经写满达到阈值,另外的列族还没写多少没有达到阈值,但是真实情况是只要有一个列族达到阈值,其他列...
HBase数据模型概念视图
06-11
HBase是一个基于Hadoop的分布式列存储数据库，其数据模型概念主要包括以下几个视图： 1. 表（Table）视图：HBase中的数据是通过表来组织和管理的，表由行和列组成。每个表都有一个唯一的表名和若干个列簇（Column Family）。 2. 行（Row）视图：HBase中的数据是以行为单位存储和访问的，每行都有一个唯一的行键（Row Key），行键是一个字节数组。行可以包含多个列簇，每个列簇可以包含多个列（Column）。 3. 列簇（Column Family）视图：列簇是表中的一个逻辑概念，可以看作是一组相关的列的集合。每个列簇都有一个唯一的名称和若干个列。 4. 列（Column）视图：列是表中的一个基本数据单元，由列名和列值组成。列名也是一个字节数组，列值可以是任意类型的数据。 5. 时间戳（Timestamp）视图：HBase中的每个单元格都可以存储多个版本的数据，每个版本都有一个对应的时间戳。时间戳是一个长整型数值，用于标识数据的版本。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

CopyProfessor

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值