hbase
关注
分享
扫一扫
文章平均质量分 74
贤云（xianyun）
爱学，不经历地狱般的磨练，怎么享受天堂的幸福，没有流过血的手指，怎么弹出世间绝唱
展开
-
安装hbase后，启动服务正常，但停止服务时出现很诡异的现象
安装hbase后，启动服务正常，但停止服务时出现很诡异的现象情况如下，小圆点一直进行，貌似停止不了hbase了：# sh bin/stop-hbase.shstopping hbase...........................................................................................................原创 2014-06-21 07:38:17 · 776 阅读 · 1 评论 -
HBase的数据模型
Hbase的数据模型row 行column 列row keys 行键column keys 列键column families 列族原创 2014-04-10 23:13:44 · 143 阅读 · 0 评论 -
zookeeper的作用
Hadoop,使用Zookeeper的事件处理确保整个集群只有一个NameNode,存储配置信息等. HBase,使用Zookeeper的事件处理确保整个集群只有一个HMaster,察觉HRegionServer联机和宕机,存储访问控制列表等....原创 2014-04-10 23:08:28 · 246 阅读 · 0 评论 -
hadoop+hbase+hive
讲解提纲Hadoop框架 Hadoop周边框架 Hadoop框架Master 同时是NameNode,在runtime时会生成JobTrackerSlave 同时是DataNode，在runtime时会生成TaskerTracker Master与Slave之间通过RPC互相通讯，没隔一定时间进行一次心跳，如果...原创 2014-04-09 21:55:31 · 204 阅读 · 0 评论 -
hive集成hbase笔记
系统环境：Hbase：0.90.3hive：0.7.0hive 0.7.0自带的lib下包含文件“hbase-0.89.0-SNAPSHOT.jar”，我的hbase版本是0.90.3，首先拷贝hbase-0.90.3.jar到hive/lib下，然后删除“hbase-0.89.0-SNAPSHOT.jar”。创建hive表、hbase表： Xml代码 CREATE ...原创 2014-04-06 22:52:58 · 252 阅读 · 0 评论 -
Hive与HBase的整合
开场白：Hive与HBase的整合功能的实现是利用两者本身对外的API接口互相进行通信，相互通信主要是依靠hive_hbase-handler.jar工具类 (Hive Storage Handlers)， 大致意思如图所示：口水： 对 hive_hbase-handler.jar 这个东东还有点兴趣，有空来磋磨一下。一、2个注意事项：1、需要的软件有 Hadoop、Hive、Hbas...原创 2014-04-06 22:48:53 · 106 阅读 · 0 评论 -
图解Hbase的单机伪分布式部署
HBase 全称Hadoop Database，是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统，利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。 本篇散仙要介绍下怎么部署安装Hbase的伪分布式模式，在安装hbase前，首先得保证你的hadoop环境已经安装好，并且可以正常使用，因为hbase底层存储使用的是HDFS，所以安装Hbase前，务必先安装hadoo...原创 2014-04-04 15:54:11 · 254 阅读 · 0 评论 -
hbase安装方式
本篇介绍两种HBase的安装方式：本地安装方式和伪分布式安装方式。 安装的前提条件是已经成功安装了hadoop，而且hadoop的版本要和hbase的版本相匹配。 我将要安装的hbase是hbase-0.90.4版本，需要的hadoop是hadoop-0.20.2版本。 1.单机安装 将下载的hbase-0.90.4解压到相应的目录，如/home/zhangxin/hbase-0.90.4 修改...原创 2014-04-04 15:53:07 · 122 阅读 · 0 评论 -
Ubuntu中安装HBase
前言HBase是Hadoop家族中的一个分布式数据库产品，HBase支持高并发读写，列式数据存储，高效的索引，自动分片，自动Region迁移等许多优点，已经越来越多的被界业认可并实施。目录在Ubuntu中环境准备HBase安装Thrift安装1 在Ubuntu中环境准备HBase是基于Java开发的运行Hadoop平台上分布式NoSQL数据库软件，HBase没...原创 2014-04-04 15:50:50 · 197 阅读 · 0 评论 -
大数据日志数据分析
大数据日志分析：1.背景1.1 黑马论坛日志，数据分为两部分，原来是一个大文件56G，以后每天生成一个文件1.2日志格式是apache common日志格式1.3分析一些核心指标，供运营决策者使用1.4开发该系统的目的是为了获取一些业务相关的指标，这些指标在第三方工具（谷歌统计，百度统计，cnzz统计）中无法获得。2.开发步骤2.1把日志数据上传到HDFS中进行处理...原创 2014-07-26 11:11:31 · 1718 阅读 · 1 评论 -
HBase 写优化之 BulkLoad 实现数据快速入库
目录[-]1、为何要 BulkLoad 导入？传统的 HTableOutputFormat 写 HBase 有什么问题？2、bulkload 流程与实践3、说明与注意事项：4、Refer：1、为何要 BulkLoad 导入？传统的 HTableOutputFormat 写 HBase 有什么问题？我们先看下 HBase 的写流程：通常...原创 2014-07-24 18:26:22 · 179 阅读 · 0 评论 -
用 Java 对 hbase 进行CRUD增删改查操作
本文以HBase 0.90.2为例，介绍如何在Windows系统，Eclipse IDE集成环境下，使用Java语言，进行HBase客户端编程，包含建立表、删除表、插入记录、删除记录、各种方式下的查询操作等。 1. 准备工作1、下载后安装jdk包（这里使用的是jdk-6u10-rc2-bin-b32-windows-i586-p-12_sep_2008）；2、下载eclipse，...原创 2014-07-24 18:24:05 · 268 阅读 · 0 评论 -
hbase shell 基础和常用命令详解
HBase是一个分布式的、面向列的开源数据库,源于google的一篇论文《bigtable：一个结构化数据的分布式存储系统》。HBase是Google Bigtable的开源实现，它利用Hadoop HDFS作为其文件存储系统，利用Hadoop MapReduce来处理HBase中的海量数据，利用Zookeeper作为协同服务。1. 简介HBase是一个分布式的、面向列的开源数据库,源于...原创 2014-07-24 18:21:30 · 168 阅读 · 0 评论 -
hbase与hive的区别
觉得在问区别之前，我应该显示说相同点，这么一想，又糊涂了，hive和hbase哪里像了，好像哪里都不像，既然哪里都不像，又何来的“区别是什么”这一问题，他俩所有的都算区别。那么，hive是什么？白话一点再加不严格一点，hive可以认为是map-reduce的一个包装。hive的意义就是把好写的hive的sql转换为复杂难写的map-reduce程序。于是，hbase是什么？同样白话一点加不严格一点...原创 2014-04-11 10:42:59 · 149 阅读 · 0 评论