HBase初体验

本文介绍了HBase的配置过程及在伪分布式环境下的运行经验,通过实例演示了如何使用HBase存储非结构化数据,对比了其与传统数据库在处理不同场景时的优势。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

      尝试了下HBase,对Hadoop这一整套的工具也算是都有了个感性的认识。我对Bigtable的描述感到很迷茫和无助,看了半天也不知道这个 东西到底是个什么东西,又应该如何使用这个东西。百闻不如一试,于是便配置了下HBase,HBase的配置和Hive一样,都非常简单,当然我指的是在伪分布式集群上,在真实的多节点集群上运行应该比较复杂,涉及到ZooKeepper的配置。我在试验机上以伪分布式的方式运行着Hadoop,把HBase下载下来之后,只需要修改两个地方就ok。
1、将hbase-env.sh中的JAVA_HOME路径设置为JDK的安装目录。
2、先"cp hbase-default.xml  hbase-site.xml",然后将hbase-site.xml中的hbase.rootdir修改成HDFS上的某个目录便可。比如:hdfs://localhost:9000/hbase
        配置完成之后先运行HBase服务器:
[henshao@test208011 bin]$ ./start-hbase.sh
master running as process 11054. Stop it first.
henshao@localhost's password:
localhost: starting regionserver, logging to /home/henshao/hbase-0.19.3/bin/../logs/hbase-henshao-regionserver-test208011.sqa.out
      服务器运行起来之后,就可以使用HBase Shell了。
[henshao@test208011 bin]$ ./hbase shell
HBase Shell; enter 'help<RETURN>' for list of supported commands.
Version: 0.19.3, r776824, Wed May 20 16:53:37 PDT 2009
hbase(main):001:0>
       在中国移动实验室的网站上找到一篇文章-http://labs.chinamobile.com/mblog/4110_22332?wralxianxrnx,照着上面操作了一番。前两天在网上看到2009年中国云计算大会,里面有中国移动的代表发表讲话,中国移动应该也在大规模使用Hadoop,凭中国移动的规模和财力,应该对开源社区有所的贡献的。
       HBase是用于存储松散耦合的数据,比起数据库对数据的约束非常少。列可以有很多属性,每一行可以有自己的属性。这种方式存储数据是很方便的,因为现实中很多数据确实是非结构化的,Google自己可能没有做类似于Hive这样的东西。移动实验室给出的那个例子非常形象。scores用于保存学生的成绩,比如保存高中同学的成绩。由于高中分为文理科,不同的同学考的科目不一样,如果使用关系数据库就需要涉及两张表。使用HBase就可以只使用一张表。
        下面录入了Tom和Jack两位同学的成绩,Tom录入的是数学成绩,Jack录入的则是艺术成绩。操作如下:
[henshao@test208011 bin]$ ./hbase shell
HBase Shell; enter 'help<RETURN>' for list of supported commands.
Version: 0.19.3, r776824, Wed May 20 16:53:37 PDT 2009
hbase(main):002:0> list
0 row(s) in 0.0026 seconds
hbase(main):003:0> create 'scores', 'grade', 'course'
0 row(s) in 6.0579 seconds
hbase(main):004:0> list
scores                                                                                                       
1 row(s) in 0.0040 seconds
hbase(main):005:0> put 'scores', 'Tom', 'course:math', '87'
0 row(s) in 0.0066 seconds
hbase(main):006:0> put 'scores', 'Jack', 'course:art', '83'
0 row(s) in 0.0032 seconds
hbase(main):007:0> get 'scores', 'Jack'
COLUMN                       CELL                                                                            
 course:art                  timestamp=1264737028325, value=83                                               
1 row(s) in 0.0104 seconds
hbase(main):008:0> describe 'scores'
{NAME => 'scores', FAMILIES => [{NAME => 'grade', COMPRESSION => 'NONE', VERSIONS => '3', LENGTH => '214748364
7', TTL => '-1', IN_MEMORY => 'false', BLOCKCACHE => 'false'}, {NAME => 'course', COMPRESSION => 'NONE', VERSI
ON
S => '3', LENGTH => '2147483647', TTL => '-1', IN_MEMORY => 'false', BLOCKCACHE => 'false'}]}              
1 row(s) in 0.0080 seconds
hbase(main):010:0> scan 'scores'
ROW                          COLUMN+CELL                                                                     
 Jack                        column=course:art, timestamp=1264737028325, value=83                            
 Tom                         column=course:math, timestamp=1264737012111, value=87                           
2 row(s) in 0.0294 seconds
         更详细的使用方法可以使用"help"来查看帮助。
1. 用户权限管理模块 角色管理: 学生:查看实验室信息、预约设备、提交耗材申请、参安全考核 教师:管理课题组预约、审批学生耗材申请、查看本课题组使用记录 管理员:设备全生命周期管理、审核预约、耗材采购分发、安全检查 用户操作: 登录认证:统一身份认证(对接学号 / 工号系统,模拟实现),支持密码重置 信息管理:学生 / 教师维护个人信息(联系方式、所属院系),管理员管理所有用户 权限控制:不同角色仅可见对应功能(如学生不可删除设备信息) 2. 实验室设备管理模块 实验室信息管理: 基础信息:实验室编号、名称、位置、容纳人数、开放时间、负责人 功能分类:按学科(计算机实验室 / 电子实验室 / 化学实验室)标记,关联可开展实验类型 状态展示:实时显示当前使用人数、设备运行状态(正常 / 故障) 设备管理: 设备档案:名称、型号、规格、购置日期、单价、生产厂家、存放位置、责任人 全生命周期管理: 入库登记:管理员录入新设备信息,生成唯一资产编号 维护记录:记录维修、校准、保养信息(时间、内容、执行人) 报废处理:登记报废原因、时间,更新设备状态为 "已报废" 设备查询:支持按名称、型号、状态多条件检索,显示设备当前可用情况 3. 预约使用模块 预约管理: 预约规则:学生可预约未来 7 天内的设备 / 实验室,单次最长 4 小时(可设置) 预约流程:选择实验室→选择设备→选择时间段→提交申请(需填写实验目的) 审核机制:普通实验自动通过,高危实验(如化学实验)需教师审核 使用记录: 签到 / 签退:到达实验室后扫码签到,离开时签退,系统自动记录实际使用时长 使用登记:填写实验内容、设备运行情况(正常 / 异常),异常情况需详细描述 违规管理:迟到 15 分钟自动取消预约,多次违规限制预约权限 4. 耗材安全管理模块 耗材管理: 耗材档案:名称、规格、数量、存放位置、
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值