
Hbase
文章平均质量分 62
wyl9527
将平时的工作进行一下总结。。。。
展开
-
Hbase的region详解
HBASE的region详解转载 2017-11-08 15:31:31 · 9047 阅读 · 3 评论 -
zabbix 监控hbase、es、hadoop进程,发出报警和远程重启服务。
需求:当我们的服务器部署了很多服务后,和服务器数量过多时,我们怎么去管理所有的服务,以及服务进程停止,第一时间发出报警,然后先自动远程执行服务。1、下面我们举个例子,zabbix监控报警和自动执行服务的启动指令。对于hadoop,hbase,es这样的集群部署,首先我们需要创建模板,将模板套进该集群组中。具体情况如下,这里我们直接讲过程,具体的每一步实现,在该系列博客中有讲到。这样每个集群组中机器...原创 2018-06-12 06:32:22 · 5783 阅读 · 0 评论 -
hbase的region分区
HBase之五:hbase的region分区 一、Region 概念Region是表获取和分布的基本元素,由每个列族的一个Store组成。对象层级图如下:Table (HBase table) Region (Regions for the table) Store (Store per ColumnFamily for转载 2017-11-25 01:46:09 · 1420 阅读 · 0 评论 -
hbase修复--数据无法写入到表中。
1、问题描述: hbase集群搭建后,突然有一天发现数据写不进去,查看了各种原因以及百度,解决方案各种各样,但是都没有解决我的问题,有的解决方法直接就相当于重新搭建一次集群,把zk中的节点以及hdfs上的hbase数据表都清了。显然不是我们要的结果。2、解决步骤 我们输入hbck命令查看hbase的集群问题:[hadoop@hadoop12 ~]$ hbase hbck 2017-11-24原创 2017-11-24 21:25:37 · 4626 阅读 · 0 评论 -
zabbix监控检测hbase的region一致性
一、背景环境1、http://localhost:16010/master-status查看hbase环境发现是正常的。 2、zabbix监控hbase的hmaster和hregion也是正常的 但是有时候会出现region的不一致性问题,这个我们也需要进行监控。二、监控方案shell脚本获取status的值,如果是OK则表示region是一一致性,如果是INCONSISTENT,表示有不一致原创 2017-12-20 00:04:42 · 1742 阅读 · 0 评论 -
HBase运维实践-聊聊RIT的那点事
HBase运维实践-聊聊RIT的那点事转载 2017-11-26 05:05:07 · 373 阅读 · 0 评论 -
Hbase region in transition多个场景解决
1、问题描述:hbase在使用过程中,后来创建了两个表,跑任务的时候,出现下面图片中的问题:region in transition 2、什么是RIT状态?As regions are managed by the master and region servers to, for example, balance the load across servers, they go through原创 2017-11-01 03:30:05 · 18028 阅读 · 0 评论 -
Hbase原理、基本概念、基本架构
概述HBase是一个构建在HDFS上的分布式列存储系统;HBase是基于Google BigTable模型开发的,典型的key/value系统;HBase是Apache Hadoop生态系统中的重要一员,主要用于海量结构化数据存储;从逻辑上讲,HBase将数据按照表、行和列进行存储。与hadoop一样,Hbase目标主要依靠横向扩展,通过不断增加廉价的商用服务器,来增加计算和存储能力。H转载 2017-11-16 03:20:18 · 684 阅读 · 0 评论 -
hbase集群安装
1.基本信息版本 1.2.4 安装机器 三台机器 账号 hadoop 源路径 /opt/software/hbase-1.2.4-bin.tar.gz 目标路径 /opt/hbase->/opt/hbase-1.2.4 依赖关系 zookeeper hadoop 2.安装过程1).使用hadoop账号解...原创 2017-05-21 13:58:18 · 606 阅读 · 0 评论 -
hbase shell指令
1、这里只是将http://www.yiibai.com/hbase/hbase_update_data.html该网站上的指令进行筛检出来。通用命令 指令 注释 status 提供HBase的状态,例如,服务器的数量 version 提供正在使用HBase版本 table_help 表引用命令提供帮助 whoami 提供有关用户的信息数据定义语言 这些是关原创 2017-11-01 02:38:09 · 505 阅读 · 0 评论 -
Hbase中的Hmaster高可用部署方案
目录1 Hmaster在Hbase中的作用2.Hmaster高可用部署2.1 创建backup-masters文件2.2 分发到其他的两台机器2.3 启动服务2.4 验证1 Hmaster的作用监控RegionServer处理RegionServer故障转移处理元数据的变更处理region的分配或转移在空闲时间进行数据的负载均衡通过Zookee...原创 2019-05-24 17:21:56 · 1996 阅读 · 0 评论