mysql-cluster免编译包下载:https://dev.mysql.com/downloads/file/?id=469881

新版本支持只把索引和用到的数据加载到内存,而不是老版本的整个数据库都得加到内存中


wget https://cdn.mysql.com//Downloads/MySQL-Cluster-7.5/mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz


解压:

# tar xvf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz

# mv xvf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64 /soft/mysql


给mysql-cluster目录授权

#useradd -s mysql /sbin/nologin

# mkdir /soft/mysql/data

# chown -R mysql:mysql /soft/mysql/*

# chmod +x /soft/mysql/bin/ndb_mem*

# cd /soft/mysql/

# ln -s /soft/mysql/bin/ndb_mgmd   /sbin/ndb_mgmd     #方便在shell直接调用ndb_mgmd命令

# ln -s /soft/mysql/bin/ndb_mgm   /sbin/ndb_mgm      #方便在shell直接调用ndb_mgm命令      

建立config.ini文件

# vim config.ini                     #内容如下,一定要注意格式。从windows复制过来的话记得用uft8编码


[NDBD DEFAULT]


NoOfReplicas=2                      #每个数据节点的镜像数量


DataMemory=500M                 #每个数据节点中给数据分配的内存


IndexMemory=300M                 #每个数据节点中给索引分配的内存


[NDB_MGMD]                     #配置管理节点,[]后面不能有空格,也不能有注释


hostname=192.168.240.130

datadir=/soft/mysql/data           #管理节点数据(日志)目录


[NDBD]                       #数据节点配置,[]后面不能有空格,也不能有注释


hostname=192.168.240.129

datadir=/soft/mysql/data 


[NDBD]


hostname=192.168.240.127

datadir=/soft/mysql/data


[MYSQLD]                     #SQL节点目录,[]后面不能有空格,也不能有注释


hostname=192.168.240.129


[MYSQLD]


hostname=192.168.240.128

-------------------------------------------------------------------------------------------------------------------

[root@amoebe mysql]# ./bin/ndb_mgmd -f config.ini      #启动服务

MySQL Cluster Management Server mysql-5.7.18 ndb-7.5.6   #启动成功


[root@amoebe mysql]# ./bin/ndb_mgm                #进入管理程序,可以看到配置文件生效了,但因为没配置节点上的mysql,所以这里显示未连接

-- NDB Cluster -- Management Client --

ndb_mgm> show

Connected to Management Server at: localhost:1186

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2 (not connected, accepting connect from 192.168.240.129)

id=3 (not connected, accepting connect from 192.168.240.127)


[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.240.130  (mysql-5.7.18 ndb-7.5.6)


[mysqld(API)]2 node(s)

id=4 (not connected, accepting connect from 192.168.240.129)

id=5 (not connected, accepting connect from 192.168.240.128)


-------------------------------------------------------------------------------------------------------------------------------

配置节点: 192.168.240.128/192.168.240.129


[root@localhost]# useradd -s /sbin/nologin mysql

[root@localhost]# mkdir /soft/mysql

[root@localhost]# tar xf mysql-cluster-gpl-7.5.6-linux-glibc2.5-x86_64.tar.gz 

[root@localhost]# mkdir /soft/mysql/data

[root@localhost]# chown -R mysql:mysql /soft/mysql

[root@localhost]# cd /soft/mysql

[root@localhost mysql]# yum install -y libaio*

vim support-files/mysql.server    #修改服务文件

basedir=/soft/mysql

datadir=/soft/mysql/data


[root@yaho mysql]# bin/mysqld  --initialize --user=mysql --basedir=/soft/mysql --datadir=/soft/mysql/data

./bin/mysqld --initialize --user=mysql --datadir=/soft/mysql/data      --注意自动生成的临时密码


[Note] A temporary password is generated for root@localhost: pByj>rz95OhV

----------------------------------------------------------------------------------------------------------------------------------

先更改密码:


[root@yaho mysql]# bin/mysql -u root -p'pByj>rz95OhV'        --登录mysql,有特殊符号,要用''括起来,在这里踏坑了

mysql> use mysql;                                --必须先更改密码才可以操作

ERROR 1820 (HY000): You must reset your password using ALTER USER statement before executing this statement.

mysql> alter user 'root'@'localhost' identified by '123456';

Query OK, 0 rows affected (0.00 sec)


[root@mysql]# vim /etc/my.cnf

[mysqld]

datadir=/soft/mysql/data

user=mysql

ndbcluster

lc_messages-dir=/soft/mysql/share/

ndb-connectstring=192.168.240.130

 

[mysql_cluster]

ndb-connectstring=192.168.240.130

 

[root@mysql]# bin/ndbd --initial      #第一次使用要初始化数据,下次不能加--initial,否则会清空数据库

[root@mysql]# ln -s /soft/mysql/bin /sbin/mysql

[root@mysql]# ln -s /soft/mysql/support-files/mysql.server  /sbin/mysqld


----------------------------------------------------------------------------------------------------------------------------

回到130控制台:


ndb_mgm> show

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2@192.168.61.128  (mysql-5.7.18 ndb-7.5.6, starting, Nodegroup: 0)  --节点ndbd已连接

id=3@192.168.61.129  (mysql-5.7.18 ndb-7.5.6, starting, Nodegroup: 0) --节点ndbd已连接


[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.61.130  (mysql-5.7.18 ndb-7.5.6)


[mysqld(API)]2 node(s)

[mysqld(API)]2 node(s)

id=4@192.168.61.128  (mysql-5.7.18 ndb-7.5.6)                  #小心防火墙

id=5@192.168.61.129  (mysql-5.7.18 ndb-7.5.6)                  #小心防火墙


-----------------------------------------------------------------------------------------------------------------------------

测试:

建库/建表

在192.168.61.128上登录mysql:

mysql>create databases abc charset=gbk;

Query OK, 0 rows affected (0.72 sec)

mysql>create table name(id int(5) not null primary key auto_increment,name varchar(10) not null ) engine=ndb;

Query OK, 0 rows affected (0.72 sec)

mysql>insert into name(name) values ('张三'),('李四');


-----------------------------------------------------------------------------------------------------------------------------

在192.168.240.128/192.168.240.129 进行查询

mysql>select * from tp.name;

+----+---------+

| id | name   |

+----+----------+

|  1 | 张三   |

|  2 | 李四   |

+----+---------+


-----------------------------------------------------------------------------------------------------------------------------

模拟192.168.240.128/192.168.240.129故障之一失效,再查询

mysql>select * from tp.name;


+----+---------+

| id | name   |

+----+----------+

|  1 | 张三   |

|  2 | 李四   |

+----+---------+

mysql>insert into name(name) values ('长江'),('黄河');

Query OK, 0 rows affected (0.72 sec)

mysql> select * from tp.name group by id;

+----+--------+

| id | name   |

+----+--------+

|  1 | 长江   |

|  2 | 黄河   |

|  3 | 张三   |

|  4 | 李四   |

+----+--------+

4 rows in set (0.01 sec)


经过测试总结大致有几点:

  1. 当cluster挂了后,两个数据节点的mysql都不能访问数据库;

  2. 当cluster挂了时,两个mysql还是可以正常工作的,更新数据也会同步,但不能重启mysql服务;

2.只要不是两个mysql服务同时挂了,数据还是安全的。

3.当cluster挂掉,节点A挂掉,这时往节点B上更新数据;cluster和节点A恢复上线后会造成节点A和节点B的数据不一致。

4.当两个mysql数据不一致时,先启动cluster,再启动数据更新的数据节点和SQL节点,确保已经成功连上cluster,最后再启动另一个节点,后一个节点会自动更新最新的数据。!!启动顺序很重要!!!

5.只要cluster和ndbd还存活,mysql暂时的失效,数据也不会丢失。

7.必须有一个ndbd存活,mysql才能正常工作。


-----------------------------------------------------------------------------------------------------------------------------


启动顺序:

管理节点 ndb_megd -> 数据节点 ndbd -> SQL节点 指定ndbcluster 参数的专用mysqld

     ndb_mgmd -f config.ini -> ndbd -> mysqld start 


关闭顺序:

SQL节点 指定ndbcluster 参数的专用mysqld ->  管理节点 ndb_mem

      mysqld stop --> ndb_mgm -e shutdown --> 完成



附配置过程中碰到的几个错误:


1. mysqld --initialize-insecure自动生成无密码的root用户,mysqld --initialize自动生成带随机密码的root用户


2.用mysql帐号设置的话需要在 /etc/security/limits.conf 中追加下面信息,不然会提示limite限制错误:

mysql   hard   nofile   65535


3.[ERROR] Can't find error-message file '/usr/local/mysql/share/zh-cn/errmsg.sys'. Check error-message file location and 'lc-messages-dir' configuration directive.

在my.cnf里添加行:

lc_messages-dir=/soft/mysql/share/


4.启动mysql时,可能会提示:ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/tmp/mysql.sock' (111)


ln -s /soft/mysql/mysql.sock  /tmp/mysql.sock             #要用绝对路径


5.ndb_mgm> showNode 2: Forced node shutdown completed. Occured during startphase 4. Caused by error 2353: 'Insuffice. ndbd服务自动断开,可能是时差的问题:

 cluser端 kill掉 ndb_mgmd 再重新启动。数据节点再重新启动ndbd 和mysqld 即可。


NDB引擎和Innodb 引擎的区别:摘自http://www.oschina.net/question/565065_79802

N NDB 和 Innodb 的使用基本是一样的,ACID (原子性、一致性、隔离性、持久性)实现方式也基本相同,但是他们之间有一个很重要的区别:在同一个 transaction 中,如果某一部的执行出错,Innodb 会继续的往下执行,而 NDB 则会马上回滚到最初状态(类似于 SqlServer 中的 SET XACT_ABORT ON 的状态),如果不注意这一点的话,在一些极端情况下,系统将出现数据不一致的情况,所以还是需要大家多多注意哦!

测试用例如下(在 test 库中进行测试):

 

[Innodb 用例]

mysql> create table test_innodb (i int not null primary key) engine innodb;

mysql> begin;

mysql> insert into test_innodb values(1);

mysql> insert into test_innodb values(1); # 主键重复出错

mysql> commit;

mysql> select * from test_innodb;

+---+
| i |
+---+
| 1 |
+---+
1 row in set (0.00 sec)

 

[NDB 用例]

mysql> create table test_ndb (i int not null primary key) engine ndbcluster;

mysql> begin;

mysql> insert into test_ndb values(1);

mysql> insert into test_ndb values(1); # 主键重复出错

mysql> commit;

mysql> select * from test_ndb;

Empty set (0.00 sec)