HBase简介:HBase是一个分布式的、面向列的开源数据库,该技术来源于Chang et al所撰写的Google论文“Bigtable:一个结构化数据的分布式存储系统”。
安装步骤:
1.下载安装包:http://www.fayea.com/apache-mirror/hbase/ 我选择的0.94版本
hbase-0.94.0.tar.gz 解压缩至/application/search目录
2.安装前确认hadoop/hdfs安装成功
3.设定HBase的配置文件
3.1: hbase-env.sh:
export JAVA_HOME=/usr/java/default/
export HADOOP_HOME=/application/search/hadoop-0.20.2-cdh3u4
export PATH=$PATH:$HADOOP_HOME/bin
export HBASE_HOME=/application/search/hbase-0.94.0
export PATH=$PATH:$HBASE_HOME/bin
export HBASE_TMP_HOME=/data0/search/hbase
export HADOOP_PID_DIR=$HBASE_TMP_HOME/pids
export HBASE_MANAGES_ZK=true
export HBASE_LOG_DIR=$HBASE_TMP_HOME/logs
export HBASE_CLASSPATH=$HADOOP_HOME/conf
export HBASE_MANAGES_ZK=true ||此处选择hbase自带的zookeeper,实际使用时推荐自建zookeeper集群
3.2:配置hbase.site.xml
<property>
<name>hbase.rootdir</name>
<value>hdfs://master:29000/hbase</value> ||此处配置与hdfs的fs.default.name 相同,尾部添加/hbase目录,指定在hbase目录下
</property>
<property>
<name>hbase.cluster.distributed</name>
<value>true</value>
</property>
<property>
<name>hbase.master</name>
<value>master:60000</value> ||设置master
</property>
<property>
<name>hbase.zookeeper.quorum</name>
<value>10.10.208.178</value> ||设置zk集群,建议是3,5,7的奇数集群配置
</property>
<property>
<name>hbase.zookeeper.property.dataDir</name>
<value>/application/search/zookeeper</value>
</property>
<property>
<name>hbase.master.maxclockskew</name>
<value>180000</value>
<description>Time difference of regionserver from master</description>
</property>
<property>
<name>zookeeper.session.timeout</name>
<value>1200000</value>
</property>
3.3:regionservers
添加与hadoop中slave文件配置的机器
slave1
slave2
slave3
4.注意:
4.1 如果是使用cloudera等其它版本的hadoop,请将hadoop-core拷贝至hbase的lib包中,并删除hbase lib包
中原有的core包
4.2 如果出现log4j的日志冲突,则删除hbase中的相应lib包即可