
hbase
JQW_YNU
无
展开
-
[HBase]HBase简介与环境部署
1 HBase简介及其在大数据生态圈的位置 行列表举例 行 / 列式数据表,即把列放在一起列式则适合于大批量查询 2 HBase数据存储模型及与关系型数据库的区别 分布式基础理论 HBase 概念 HBase与传统数据库的区别 ...转载 2018-10-08 08:20:03 · 178 阅读 · 0 评论 -
[Hbase]HBase架构详解和数据的读写流程
HBase架构图理解18.pngHMaster链接Zookeeper的目得:HMaster需要知道哪些HRegionServere是活的及HRegionServer所在的位置,然后管理HRegionServer。 HBase内部是通过DFS client把数据写到HDFS上的 每一个HRegionServer有多个HRegion,每一个HRegion有多个Store,每一个Stor...转载 2018-10-08 08:32:58 · 550 阅读 · 0 评论 -
[Hbase]HBASE SHELL常用命令
HBASE SHELL常用命令标签: HBase Shell1. 进入hbase shell console$HBASE_HOME/bin/hbase shell如果有kerberos认证,需要事先使用相应的keytab进行一下认证(使用kinit命令),认证成功之后再使用hbase shell进入可以使用whoami命令可查看当前用户.hbase(main)> whoami...转载 2018-10-08 08:35:45 · 426 阅读 · 0 评论 -
[Hbase]Hbase的过滤器分类
Hbase的过滤器分类1、比较过滤器1.1、行键过滤器RowFilterFilter filter1 = new RowFilter(CompareOp.LESS_OR_EQUAL, new BinaryComparator(Bytes.toBytes("row-22"))); scan.setFilter(filter1); 1.2、列族过滤器FamilyFilter...转载 2018-10-08 09:14:52 · 678 阅读 · 0 评论 -
【Hbase调优】HBase性能优化方法总结
本文主要是从HBase应用程序设计与开发的角度,总结几种常用的性能优化方法。有关HBase系统配置级别的优化,这里涉及的不多,这部分可以参考:淘宝Ken Wu同学的博客。Hbase优化:1.常见服务端配置优化2.常见优化策略(以实际需求为主)3.Hbase读写性能优化 1. 表的设计 1.1 Pre-Creating Regions默认情况下,在创建HBase表的时候会...转载 2018-10-08 09:26:38 · 241 阅读 · 0 评论 -
【HBase调优】Hbase万亿级存储性能优化总结
背景:HBase主集群在生产环境已稳定运行有1年半时间,最大的单表region数已达7200多个,每天新增入库量就有百亿条,对HBase的认识经历了懵懂到熟的过程。为了应对业务数据的压力,HBase入库也由最初的单机多线程升级为有容灾机制的分布式入库,为及早发现集群中的问题,还开发了一套对HBase集群服务和应用全面监控的报警系统。总结下HBase优化(针对0.94版本)方面的一些经验也算对这两年...转载 2018-10-08 09:33:42 · 470 阅读 · 0 评论 -
Hbase基本操作
1.1 连接HBase使用hbase shell命令来连接正在运行的Hbase实例,该命令位于HBase安装包下的bin/目录。HBase Shell提示符以>符号结束。$ ./bin/hbase shellhbase(main):001:0>1.2 显示HBase Shell 帮助文档输入help并按Enter键,可以显示HBase Shell的基本使用信息,和我...原创 2018-11-15 16:52:21 · 645 阅读 · 0 评论