MySql集群搭建笔记

MySql集群搭建笔记

• 博客分类： 
• 配置与管理
• 数据库

Mysql cluster 集群 

1.      Mysql集群介绍

Mysql集群架构中主要包括管理节点和数据节点，管理节点负责整个集群结构的管理，数据的存储则由各个数据节点负责。当然，像非集群环境一样，需要提供一个mysql的节点供外部程序访问数据库。Mysql 集群的具体组织方式图-01

 

图-01

接下来便对其中涉及的各个节点和模块进行一一介绍

Management Node(管理节点)：mysql集群全局的管理者，整个集群只有一个management node,负责管理集群架构中的其他Nodes(节点)，包括控制其他节点的启停，查看节点状态等。另外还维护了集群的全局配置信息，因此在整个集群环境中应该优先于所有节点启动。管理节点启动命令为ndb_mgmd.

Data Node(数据节点)：数据的存储节点，集群中会有多个Data Node，每个节点存储数据多个数据副本。虽然mysql集群可以设置副本数量为1，即集群没有数据冗余，所有节点的只存储各自数据片段的副本，但是这样的集群也就失去了意义，所以为了保证高可用性，建议最好是设定副本数量至少为2，或者更大，一份用于存储，一份作为冗余。系统默认值为2. 冗余副本数量越大，需要的节点数就会越多。Data node 节点启动命令为ndbd.关于存储副本的概念参考图-02（来自官网）也许有助于理解副本、冗余的含义和作用。

 

图-02

如图-02，集群中存在四个data node，分别为node1、node2、node3、node4， 集群数据分区存储，其中node1存储数据的partition 0，同时存储partition 2的一个备份副本用作冗余。其他节点类似。那样的好处是什么呢，见图-03

 

图-03

在这个例子中，即使group0和group1中各有一个node故障，整个cluster中也会有一份完整的数据，保持系统运转正常。

 

Sql Node (SQL节点): 对外提供访问mysql集群数据的入口，该节点可以有多个。也就是在单机环境下的mysqld服务。在启动该服务以后，我们便可以通过标准的mysql client程序的访问数据数据库。启动命令为mysqld

Applications(外部应用)：外部应用要想访问集群环境下的数据库并不能直接访问data node，访问的是sql node，访问方法与单机环境一致。

 

2.      集群方案介绍

本文以实例的方式演示mysql cluster环境的搭建，首先介绍下我们预设的集群实例的方案。

搭建环境为windows xp（虚拟机）。

节点	IP	主机名
管理节点	192.168.109.130	Xp1
数据节点1	192.168.109.131	Xp2
数据节点2	192.168.109.132	Xp3
SQL节点	192.168.109.130	Xp1

细心的读者可能发现了，SQL节点和管理节点是同一台虚拟机。这是因为笔者机器性能有限，同时开了三个虚拟机已经很吃力了。另外mysql cluster中各个节点并不是要求与机器是一对一的，也就是说这种节点的划分是逻辑上的，是进程级的，只要是不同的进程即可。所以一台主机上可以运行多个节点。

 

3.      安装过程

3.1    安装包下载

下载一个支持集群的mysql版本。Mysql的单机版和集群版是两个不同的安装包。因为本例是在windows环境下搭建，所以我们可以到官网的这个页面上去选择相应的安装包下载。http://dev.mysql.com/downloads/cluster/ 在本例中我们选择ZIP Archive的非安装版本 ，这样我们可以直接解压就能用。

把压缩包分别传至各个节点主机，然后解压到C盘。解压后目录以c:\mysql-cluster为例。

3.2    管理节点

主机xp1的C:\mysql-cluster\bin下新建一个文件config.ini,其中内容如下： 

 

Xml代码  

1. [ndbd default]  
2. # Options affecting ndbd processes on all data nodes:  
3. NoOfReplicas=2                      #复本数量，此例采用默认值2  
4. DataDir=C:/mysql-cluster/bin/cluster-data   # 数据节点存储目录  
5. DataMemory=80M    # 数据存储分配的内存，酌情设置  
6. IndexMemory=18M   # 索引存储分配的内存，酌情设置  
7.   
8. [ndb_mgmd]  
9. # Management process options:  
10. HostName=192.168.109.130               # 管理节点所在主机IP  
11. DataDir=C:/mysql-cluster/bin/cluster-logs   # 管理节点日志目录  
12.   
13. [ndbd]  
14. # Options for data node "A":  
15. # (one [ndbd] section per data node)  
16. HostName=192.168.109.132           # 节点所在主机IP  
17. datadir=C:/mysql-cluster/data   # 数据存储目录  
18.   
19. [ndbd]  
20. # Options for data node "B":  
21. HostName=192.168.109.133           # 节点所在主机IP  
22. datadir=C:/mysql-cluster/data  
23.   
24. [mysqld]  
25. # SQL node options:  
26. HostName=192.168.109.130           # SQL节点所在主机IP  

 

这些为集群整体的配置信息，其中[ndbd default]为全局数据节点的默认配置模块。[ndb_mgmd]为管理节点配置模块。[ndbd]为数据节点配置模块。[mysqld]为sql节点配置模块。#后面为注释内容，实际文件可以将这些注释去掉，以防止因为中文的存在导致mysql解析文件失败。启动管理节点直接调用bin目录下的ndb_mgmd.exe即可，但是我们在命令后指定我们上述的配置文件和集群配置的缓存目录，所以命令为

 

Java代码  

1. ndb_mgmd.exe --config-file=C:\\mysql-cluster\\bin\\config.ini --configdir=C:\mysql-cluster\bin\config-cache  

 

为了方便起见，我们在c:\mysql-cluster\bin目录下新建一个文件ndb_mgmd_start.bat，将上述管理节点启动的命令写入该批处理文件中作为启动命令。

3.3    数据节点

我们以数据节点1为例介绍，节点2与此类似。在主机xp2的c:\mysql-cluster下新建文件my.ini。键入如下内容

 

Xml代码  

1. [mysql_cluster]  
2. # Options for data node process:  
3. ndb-connectstring=192.168.109.130  # location of management server  

 

 

3.4    SQL节点

在xp1节点的c:\mysql-cluster目录下新建文件my.ini，键入如下内容

 

Xml代码  

1. [mysqld]  
2. ndbcluster                      # run NDB storage engine  
3. ndb-connectstring=192.168.109.130  # location of management serve  

 

其中ndbcluster指定了存储引擎为集群环境，ndb-connectstring指定了管理节点的地址。

         到此为止所有节点配置工作就完成了。

4.      节点管理

4.1    ndb_mgm介绍

mysql cluster提供了ndb_mgm.exe来对集群进行管理，在xp1主机的c:\mysql-cluster\bin目录下。我们可以直接在命令行执行该命令进入管理控制台。（注：该程序需要在管理节点启动后才能执行）

常用的命令包括:

show: 显示集群中所有节点的状态。如图-04

 

图-04

Node_id status: 查看node_id对应的节点的状态

shutdown –e: 停止管理节点和所有数据节点。SQL节点不会被停掉。

笔者就简单用了这几个，其他命令还很多，可以通过HELP命令来查看。

4.2    节点启停

Mysql cluster启动有顺序要求，管理节点要最先启动。

启动管理节点：在命令行中进到c:\mysql-cluster\bin目录下，执行我们之前编辑的批处理文件ndb_mgmd_start.bat.如果启动正常，我们此时可以执行ndb_mgm程序，通过管理控制台查看节点状态了。

启动数据节点：依次在各个数据节点主机的命令行中进到c:\mysql-cluster\bin目录下，执行ndbd.exe 即可。通过ndb_mgm的管理控制台查看启动状态。

启动SQL节点：在SQL节点的命令行中进到c:\mysql-cluster\bin目录下，执行mysqld.exe即可。通过ndb_mgm的管理控制台查看启动状态。

                   节点停止：在ndb_mgm的管理控制台中执行shutdown –e 则管理节点和数据节点均会停止。另外SQL节点需要手动停止。

5.      验证

集群环境搭建完成我们可以对其进行验证。此处偷偷懒，直接引用一个官网的图，如图-05

 

图-05

注意图中建表语句中的ENGINE=NDBCLUSTER。

如果有兴致还以通过外部程序验证一下。注意外部程序访问URL还是SQL节点。

好了，这样我们的mysql 集群环境就搭建完成了。