
HBase
codenow.fun
不惑于自己,不惑于未来;找到自己的兴趣爱好,并不断坚持下去。
展开
-
HBase RIT异常分析及其解决方案, region(s)in transistion for more than 60000 milliseceonds
最近的一段时间,HBase集群突然出现了一些异常,偶尔部分机器会出现RIT的情况,原创 2020-09-20 23:21:22 · 5594 阅读 · 0 评论 -
HBase-2.2.4 Shell操作指令和Java Api归纳
Shell 数据定义create: 用于创建一个表。create 'order','info','user'create 'userlog','info','params','result'list: 用于列出HBase的所有表。hbase(main):009:0> listTABLEorderuserlog2 row(s)Took 0.0088 seconds=> ["order", "userlog"]disable: 用于禁用表。h.原创 2020-09-16 23:48:21 · 238 阅读 · 0 评论 -
HBase-2.2.4架构原理与完全分布式使用
HBase的架构通过上图我们可以得出Hbase中的每张表都按照一定的范围被分割成多个子表(HRegion),默认一个HRegion超过 256M 就要被分割成两个,由 HRegionServer管理,管理哪些HRegion由HMaster分配。现在我们来介绍一下HBase中的一些组成部件以及它们起到的作用:Client:包含访问HBase的接口,并维护cache来加快对HBase的访问。Zookeeper:HBase依赖Zookeeper,默认情况下HBase管理Zookeeper.原创 2020-09-15 23:58:43 · 341 阅读 · 0 评论 -
深入理解LSM存储模型
LSM(log-structed-merge-tree)原创 2020-05-27 23:56:34 · 1391 阅读 · 0 评论 -
hbase/hadoop异常:No lease on /hbase/archive/data/... File is not open for writing
./hbase org.apache.hadoop.hbase.snapshot.ExportSnapshot -snapshot "MODEL.THIRD_PARTY_KV-11211752-snapshot" -copy-from hdfs://fromIP:9000/hbase -copy-to hdfs://toIP:9000/hbase -mappers 40 -bandwidth 300错误日志;org.apache.hadoop.hdfs.server.namenode.LeaseExp原创 2020-05-23 00:03:45 · 981 阅读 · 0 评论 -
HBase海量业务数据二级查询实现毫秒级响应,HBase原理与数据模型设计详解
为什么需要使用HBase做海量业务数据的存储1、扩展性强、容量大,支持百亿行、百万列数据的存储。HBase底层基于HDFS,可动态增加节点2、高可靠性,WAL机制保证数据的安全性,Replication机制保证集群的数据容灾能力3、高性能,由于底层的LSM数据结构和RowKey有序排序,HBase具备较好的随机读取性能,RowKey的查询可达毫秒级响应4、稀疏性、面向列存储,空列不...原创 2020-04-27 23:29:03 · 1004 阅读 · 0 评论