孤城烟雨话凄凉

一、概要本文记录hbase高可用集群部署过程，在部署hbase之前需要事先部署好hadoop集群，因为hbase的数据需要存放在hdfs上，hadoop集群的部署后续会有一篇文章记录，本文假设hadoop集群已经部署好，分布式hbase集群需要依赖zk，并且zk可以是hbase自己托管的也可以是我们自己单独搭建的，这里我们使用自己单独搭建的zk集群，我们的hadoop集群是用的cdh的发行

一、概要由于工作需要，最近一段时间开始接触学习hadoop相关的东西，目前公司的实时任务和离线任务都跑在一个hadoop集群，离线任务的特点就是每天定时跑，任务跑完了资源就空闲了，为了合理的利用资源，我们打算在搭一个集群用于跑离线任务，计算节点和储存节点分离，计算节点结合aws的Auto Scaling（自动扩容、缩容服务）以及竞价实例，动态调整，在跑任务的时候拉起一批实例，任务跑完就自动

用于测试，我用4台虚拟机搭建成了hadoop结构我用了两个台式机。一个xp系统，一个win7系统。每台电脑装两个虚拟机，要不然内存就满了。 1、安装虚拟机环境     Vmware，收费产品，占内存较大。     或     Oracle的VirtualBox，开源产品，占内存较小，但安装ubuntu过程中，重启会出错。     我选

一、项目背景介绍 二、建设目标 三、IBM  解决方案 3.1   方案架构 3.1.1  物理拓扑图 3.1.2  逻辑图  3.1.3   存储规划建议 3.2   方案特点 3.2.1   实现存储资源池化3.2.2 优化应用运行效率  3.2.3   精简配置 3.2.4   通过复制服务保护数据