
hbase
Xlucas
做自己,做一个最普通的分享者
展开
-
HBase中wal文件过多导致Zookeeper异常问题
最近hbase出现了大量KeeperErrorCode = ConnectionLoss for /hbase/splitWAL 异常,而且在重启hbase的时候,没有办法启动hbase,经过仔细诊断之后发现是由于hbase的WAL文件非常多(达到30TB),导致hbase在zk的节点(存储WAL文件信息的节点)超过4096*1024 默认大小,无法正常提供服务。因此,hbase master无法...原创 2019-12-04 13:19:05 · 1846 阅读 · 1 评论 -
HBASE安装
集群安装: 1、 上传安装包 2、 解压安装包tar -xvf hbase-0.96.2-hadoop2-bin.tar.gz -C /home/hadoop/ 3、 修改hbase-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_55//告诉hbase使用外部的zk export HBASE_MANAGES_ZK=false 4、 修改 hbase原创 2016-08-28 17:47:17 · 580 阅读 · 0 评论 -
Hbase架构
下面这个图展示了Hbase是如何与Hadoop文件系统协作完成数据存储的 Hbase体系结构 一个HMaster 有多个HRegionServer 一个HRegionServer有多个HRegion 写入过程 Hlog(操作数据)—>MemStore(一个column family对应一个memstore,这个是内存,当到了值的时候 会flush到磁盘形成storefile)—->St原创 2017-08-09 23:49:19 · 507 阅读 · 0 评论