HBase是一个分布式的、面向列的开源数据库,该技术来源于 Fay Chang 所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。就像Bigtable利用了Google文件系统(File System)所提供的分布式数据存储一样,HBase在Hadoop之上提供了类似于Bigtable的能力。HBase是Apache的Hadoop项目的子项目。HBase不同于一般的关系数据库,它是一个适合于非结构化数据存储的数据库。另一个不同的是HBase基于列的而不是基于行的模式。接下来记录一下HBase的安装和一些基本的使用:
安装JDK
安装JDK具体操作,请点击链接
SSH设置和密钥生成
SSH设置需要在集群上执行不同的操作,如启动,停止和分布式守护shell操作。进行身份验证不同的Hadoop用户,需要一种用于Hadoop的用户提供的公钥/私钥对,并用不同的用户共享。以下的命令被用于生成秘钥值对。复制公钥从id_rsa.pub
为authorized_keys
,并提供所有者、读写权限到authorized_keys
当中:
ssh-keygen -t rsa
cat id_rsa.pub >> /root/.ssh/authorized_keys
chmod 0600 /root/.ssh/authorized_keys
验证ssh
ssh localhost
不出意外的话,将会显示如下信息:
Welcome to Ubuntu 16.04 LTS (GNU/Linux 4.4.0-21-generic x86_64)
* Documentation: https://help.ubuntu.com/
205 packages can be updated.
110 updates are security updates.
*** System restart required ***
安装配置Hadoop
1、从官网下在相应版本的安装包,这里我下载的是2.9.0版本
2、解压
tar -zxvf hadoop-2.9.0.tar.gz
3、移动至/usr/local/hadoop
目录当中
mv hadoop-2.9.0 /usr/local/hadoop
4、配置环境变量,使用vi编辑器打开/etc/profile
文件,添加如下代码:
export HADOOP_HOME=/usr/local/hadoop
export HADOOP_MAPRED_HOME=$HADOOP_HOME
export HADOOP_COMMON_HOME=$HADOOP_HOME
export HADOOP_HDFS_HOME=$HADOOP_HOME
export YARN_H