Mysql Cluster集群配置

所有的这些节点构成一个完成的MySQL集群体系。数据保存在“NDB存储服务器”的存储引擎中，表
（结构）则保存在“MySQL服务器”中。应用程序通过“MySQL服务器”访问这些数据表，集群管理服务
器通过管理工具(ndb_mgmd)来管理“NDB存储服务器”。
通过将MySQL Cluster 引入开放源码世界，MySQL为所有需要它的人员提供了具有高可用性、高性
能和可缩放性的 Cluster 数据管理。
MySQL Cluster 基本概念 “NDB” 是一种“内存中”的存储引擎，它具有可用性高和数据一致性好的
特点。

MySQL Cluster 能够使用多种故障切换和负载平衡选项配置NDB存储引擎，但在 Cluster 级别上的
存储引擎上做这个最简单。MySQL Cluster的NDB存储引擎包含完整的数据集，仅取决于 Cluster本
身内的其他数据。
目前，MySQL Cluster的 Cluster部分可独立于MySQL服务器进行配置。在MySQL Cluster中，
Cluster的每个部分被视为1个节点。
管理(MGM)节点：这类节点的作用是管理MySQL Cluster内的其他节点，如提供配置数据、启动并停
止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点之前首先启动这类节
点。MGM节点是用命令“ndb_mgmd”启动的。
数据节点：这类节点用于保存 Cluster的数据。数据节点的数目与副本的数目相关，是片段的倍数。例
如，对于两个副本，每个副本有两个片段，那么就有4个数据节点。不过没有必要设置多个副本。数据
节点是用命令“ndbd”启动的。
SQL节点：这是用来访问 Cluster数据的节点。对于MySQL Cluster，客户端节点是使用NDB
Cluster存储引擎的传统MySQL服务器。通常，SQL节点是使用命令“mysqld –ndbcluster”启动的，
或将“ndbcluster”添加到“my.cnf”后使用“mysqld”启动。注释：在很多情况下，术语“节点”用 于指
计算机，但在讨论MySQL Cluster时，它表示的是进程。在单台计算机上可以有任意数目的节点，为
此，我们采用术语“ Cluster主机”。
管理服务器(MGM节点)负责管理 Cluster配置文件和 Cluster日志。 Cluster中的每个节点从管理服务
器检索配置数据，并请求确定管理服务器所在位置的方式。当数据节点内出现新的事件时，节点将关于
这类事件的信息传输 到管理服务器，然后，将这类信息写入 Cluster日志。
此外，可以有任意数目的 Cluster客户端进程或应用程序。它们分为两种类型：
标准MySQL客户端：对于MySQL Cluster，它们与标准的（非 Cluster类）MySQL没有区别。换句
话讲，能够从用PHP、Perl、C、C++、Java、Python、Ruby等编写的现有MySQL应用程序访问
MySQL Cluster。
管理客户端：这类客户端与管理服务器相连，并提供了启动和停止节点、启动和停止消息跟踪（仅调试
版本）、显示节点版本和状态、启动和停止备份等的命令。

配置环境：

rhel6.5

192.168.2.111    manager节点

192.168.2.112    ndbd节点

192.168.2.113   mysql节点

192.168.2.108   ndbd2节点

192.168.2.106  mysql2节点

下载所需的软件包:
MySQL-Cluster-gpl-client-7.1.18-1.el6.x86_64.rpm
MySQL-Cluster-gpl-management-7.1.18-1.el6.x86_64.rpm
MySQL-Cluster-gpl-server-7.1.18-1.el6.x86_64.rpm
MySQL-Cluster-gpl-storage-7.1.18-1.el6.x86_64.rpm
MySQL-Cluster-gpl-tools-7.1.18-1.el6.x86_64.rpm

在配置前必须全部关闭数据库

/etc/init.d/mysqld stop

一.manager节点安装配置

1.安装manager节点包

rpm -ivh MySQL-Cluster-gpl-management-7.1.18-1.el6.x86_64.rpm 

rpm -ivh MySQL-Cluster-gpl-tools-7.1.18-1.el6.x86_64.rpm
2.添加管理节点配置文件

（1）mkdir /usr/mysql-cluster
（2） cd /usr/mysql-cluster/
（3） vim config.ini

[ndbd default]
noofreplicas=1

#该全局参数仅能在[NDBD DEFAULT]中设置,它定义了
cluster 中每个表保存的副本数。该参数还指定了节点组的大小。节点组指的是
保存相同信息的节点集合

datamemory=20M

#该参数定义了数据节点用于保存数据库记录的空间大小,全部
空间均是分配在内存中的,确保你的数据节点具有足够的物理内存来容纳该值,
由于我这是使用虚拟机测试,所以设置的偏小,你可以依照实际环境来定义此值

indexmemory=5M

#该参数用于控制 cluster 中哈希(混编)索引所使用的存储量



[ndb_mgmd]
nodeid=1
hostname=192.168.2.111#定义管理节点 ip

datadir=/usr/mysql-cluster/   #它用于设置保存管理服务器输出文件的位置。
这些文件包括 cluster 日志文件、进程输出文件、以及端口监督程序的 pid 文件


[ndbd]
nodeid=2
hostname=192.168.2.112
datadir=/usr/local/ndbd/

[mysqld]
nodeid=3
hostname=192.168.2.113  #定义 sql 节点 ip

3.让管理节点使用配置文件

ndb_mgmd -f /usr/mysql-cluster/config.ini

4.ndb_mgm

show

二.配置data节点

1安装data节点所需的数据包

rpm -ivh MySQL-Cluster-gpl-storage-7.1.18-1.el6.x86_64.rpm

2修改data配置文件

（1）  cd /etc/

（2）cp my.cnf my.cnf.bak

（3）vim my.cnf

[mysqld]
ndbcluster
ndb-connectstring=192.168.2.111
[mysqld_cluster]
ndb-connectstring=192.168.2.111

3.[root@desktop112 etc]# mkdir /usr/local/ndbd

4.启动ndbd

[root@desktop112 etc]# ndbd --initial
2015-01-27 16:01:03 [ndbd] INFO     -- Angel connected to '192.168.2.111:1186'
2015-01-27 16:01:03 [ndbd] INFO     -- Angel allocated nodeid: 2

三配置mysql节点
1.卸载原来的mysql数据库

yum remove mysql mysql-server
rpm -e mysql-libs --nodeps

2.删除原来mysql数据库的生成文件

rm -fr /var/lib/mysql

3.安装mysql节点数据库
rpm -ivh MySQL-Cluster-gpl-client-7.1.18-1.el6.x86_64.rpm

MySQL-Cluster-gpl-server-7.1.18-1.el6.x86_64.rpm
4.复制配置文件，并修改

（1）cp /usr/share/mysql/my-large.cnf /etc/my.cnf

如果你的内存≤64M,则复制/usr/share/mysql/my-small.cnf 为/etc/my.cnf
如果内存是 128M,则复制/usr/share/mysql/my-medium.cnf 为/etc/my.cnf
如果内存是 512M,则复制/usr/share/mysql/my-large.cnf 为/etc/my.cnf
如果内存是 1-2G,则复制/usr/share/mysql/my-huge.cnf 为/etc/my.cnf
如果内存是 4G,则复制/usr/share/mysql/my-innodb-heavy-4G.cnf 为
/etc/my.cnf

（2）vim /etc/my.cnf

[mysqld]
....
ndbcluster
ndb-connectstring=192.168.2.111
[mysql_cluster]
ndb-connectstring=192.168.2.111
5.启动数据库

root@desktop113 mysql_cluster]# /etc/init.d/mysql start
Starting MySQL.. SUCCESS!

现在再去管理节点查看，可以看到所有节点数据已经能够接收到

注意：

首先启动管理节点,然后启动存储节点,最后启动 SQL 节点。
管理节点:ndb_mgmd -f /usr/mysql-cluster/config.ini
数据节点:ndbd --initial
注: 仅在首次启动 ndbd 时,或在备份/恢复或
配置变化后重启 ndbd 时使用“--initial”参数,这很重要。
原因在于,该参数会
使节点删除由早期 ndbd 实例创建的、用于恢复的任何文件,包括恢复用日志文
件
sql 节点:service mysql start

四。在线添加节点

1.在manager 节点进行修改

vim /usr/mysql-cluster/config.ini

[ndb_mgmd]
nodeid=1
hostname=192.168.2.111
datadir=/usr/mysql-cluster/

[ndbd]
nodeid=2
hostname=192.168.2.112
datadir=/usr/local/ndbd/


[mysqld]
nodeid=3
hostname=192.168.2.113

[ndbd]
nodeid=4
hostname=192.168.2.108
datadir=/usr/local/ndbd/

[mysqld]
nodeid=5
hostname=192.168.2.106

[mysqld]  #在做备份时，必须添加一个空节点

2.重新读取配置文件，

（1）先把ndb_mgmd进程关闭掉

killall ndb_mgmd

或者在ndb_mgm中使用

shutdown

（2）重新读取配置文件数据

ndb_mgmd -f /usr/mysql-cluster/config.ini --initial
MySQL Cluster Management Server mysql-5.1.56 ndb-7.1.18

（3）查看cluster信息

ndb_mgm

3.将数据节点1的配置文件拷贝给数据节点2

[root@desktop112 ndbd]# scp /etc/my.cnf 192.168.2.108:/etc/

在数据节点2进行配置：

4.[root@desktop108 mysql_cluster]# rpm -ivh MySQL-Cluster-gpl-storage-7.1.18-1.el6.x86_64.rpm
5.[root@desktop108 mysql_cluster]# mkdir /usr/local/ndbd

6.[root@desktop108 mysql_cluster]# ndbd --initial
2015-01-27 09:46:36 [ndbd] INFO     -- Angel connected to '192.168.2.111:1186'
2015-01-27 09:46:36 [ndbd] INFO     -- Angel allocated nodeid: 4
7.再添加一台数据库节点，和前面添加数据库节点方法一样，不再赘述。

8.所有节点启动起来后，可以在管理节点查看

五。集群数据测试

在数据库节点desktop113数据库添加数据

1.建立建表语句文件

vim add.sql

CREATE TABLE city (
ID int(11) NOT NULL auto_increment,
Name char(35) NOT NULL default '',
CountryCode char(3) NOT NULL default '',
District char(20) NOT NULL default '',
Population int(11) NOT NULL default '0',
PRIMARY KEY (ID)
) ENGINE=NDBCLUSTER;
#指定 MySQL 为该表使用了 NDB 存储引擎,数据存储
于各数据节点,不然 mysql 使用默认的 MyISAM 存储引擎,所有的数据将会存储于
本机,和单机一样。

INSERT INTO city VALUES (1,'Kabul','AFG','Kabol',1780000);
INSERT INTO city VALUES (2,'Qandahar','AFG','Qandahar',237500);
INSERT INTO city VALUES (3,'Herat','AFG','Herat',186800);

2.将建表语句导入数据库

mysql test <add.sql

3.登录两台SQL数据库可以发现有相同的数据表

六。数据备份与恢复

（1）在管理节点执行备份:

ndb_mgm> start backup
Waiting for completed, this may take several minutes
Node 2: Backup 1 started from node 1
Node 2: Backup 1 started from node 1 completed
 StartGCP: 1022 StopGCP: 1025
 #Records: 2059 #LogRecords: 0
 Data: 51264 bytes Log: 0 bytes
（2）将ndb_restore复制给两台数据节点

sql 节点删除 City 表中的所有数据(mysql > delete from city)执行恢复。由
于数据分散在两个数据节点,因此在各数据节点执行恢复:(由于我使用的是 rpm
包方式安装,各数据节点没有 ndb_restore 命令,可以直接从管理节点 scp)

scp /usr/bin/ndb_restore 192.168.2.112:/usr/bin/

scp /usr/bin/ndb_restore 192.168.2.108:/usr/bin/

（3）在数据节点2上执行：

ndb_restore -n 2 -b 1 -r /usr/local/ndbd/BACKUP/BACKUP-1/

##-n 指节点 id -b 指备份 id -r 指备份目录

（4）在数据节点4上执行：

ndb_restore -n 4 -b 1 -r /usr/local/ndbd/BACKUP/BACKUP-1/

（5）

这时在 sql 节点上查看可以发现数据已将恢复