何为MMM？

MMM（Master-Master replication manager for Mysql，Mysql 主主复制管理器）是一套支持双主故障切换和双主日常管理的脚本程序。MMM使用Perl语言开发，主要用来监控和管理Mysql Master-Master（双主）复制，虽然叫做双主复制，但是业务上同一时刻只允许对一个主进行写入，另一台备选主上提供部分读服务，以加速在主主切换时备选主的预热，可以说MMM这套脚本程序一方面实现了故障切换的功能，另一方面其内部附加的工具脚本也可以实现多个Slave的read负载均衡

MMM是一套灵活的脚本程序，基于Perl实现，用来对mysql replication进行监控和故障转移并能管理Mysql Master-Master复制的配置

关于MMM高可用架构的说明如下

1）mmm_mon：监控进程，负责所有的监控工作，决定和处理所有节点角色活动。此脚本需要在监管机上运行

2）mmm_agent：运行在每个Mysql服务器上的代理进程，完成监控的探针工作和执行简单的远端服务设置。此脚本需要在各节点上运行

3)mmm_control：一个简单的脚本，提供管理mmm_mond进程的命令

4）mysql-mmm的监控端会提供多个虚拟IP（VIP），包括一个可写VIP，多个可读VIP，通过监管的管理，这些IP会绑定在可用的Mysql之上，当某一台Mysql宕机时，监控会将VIP迁移至其他Mysql

在整个监管过程中，需要在Mysql中添加相关授权用户，以便让Mysql可以支持监理机的维护。授权的用户包括一个mmm_monitor和一个mmm_agent用户。

案例环境部署：


本案例环境使用五台服务器模拟搭建


              主机                         操作系统                             IP地址                          

            master1                    CentOS7                        192.168.195.128

            master2                    CentOS7                        192.168.195.137

            slave1                       CentOS7                        192.168.195.140

            slave2                       CentOS7                        192.168.195.141

          monitor                       CentOS7                        192.168.195.142

案例实施

1，首先配置ALI云源，然后安装epel-release源。

CentOS默认没有mysql-mmm软件包，官方推荐使用epel源，五台主机都要安装eperl源和MMM

service firewalld stop
setenforce 0
wget -0 /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo         //使用阿里云提供的yum源
yum -y install epel-release
yum clean all && yum makecache

2，搭建mysql多主多从模式

（1）在master1，master2，slave1，slave2这四台主机上在线安装mariadb（免费社区版的mysql）

yum -y install mariadb-server mariadb

systemctl start mariadb

（2）修改配置文件my.cnf

首先修改master1主配置文件

vi /etc/my.cnf    (9dd删掉[mysqld]标签之前的内容，重新插入下面的配置）
[mysqld]
log_error=/var/lib/mysql/mysql.err                                //开启错误日志功能
log=/var/lib/mysql/mysql_log.log      //开启一般日志功能
log_slow_queries=/var/lib/mysql_slow_queris.log                  //开启慢日志功能
binlog-ignore-db=mysql,information_schema               //不需要同步的数据库名称
character_set_server=utf8        //设置默认的字符集为utf-8
log_bin=mysql_bin                       //开启二进制日志，用于主从数据复制
server_id=1                  //每台server_id的值不能相同         
log_slave_updates=true             //此数据库宕机，备用数据库接管
sync_binlog=1
auto_increment_increment=2       //字段一次递增2
auto_increment_offset=1               //自增字段的起始值：1，3，5，7.........等奇数ID

systemctl restart mariadb
netstat -anpt | grep 3306

tcp        0      0 0.0.0.0:3306            0.0.0.0:*               LISTEN      5029/mysqld

没有问题后，把配置文件my.cnf复制到其他3台数据库服务器上并启动服务器

每台mysql主机的server_id参数不能相同，其他配置文件参数相同


scp /etc/my.cnf [email protected].195.137:/etc/

scp /etc/my.cnf [email protected]. 195.140:/etc/
scp /etc/my.cnf [email protected]. 195.141:/etc/


 

注：配置文件中的server_id参数不能相同，需要修改。第二台server_id=2 第三台3  第四台4

（3）配置Master-Master主主复制----两台主服务器互相复制

首先进入mysql查看log-bin日志和pos值的位置（在授权的时候要随时更新position位置变化）

在master1上

MariaDB [(none)]> show master status;
+------------------+----------+--------------+--------------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB         |
+------------------+----------+--------------+--------------------------+
| mysql_bin.000003 |      411 |              | mysql,information_schema |
+------------------+----------+--------------+--------------------------+
1 row in set (0.00 sec)

在master2上

MariaDB [(none)]> show master status;
+------------------+----------+--------------+--------------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB         |
+------------------+----------+--------------+--------------------------+
| mysql_bin.000004 |      491 |              | mysql,information_schema |
+------------------+----------+--------------+--------------------------+
1 row in set (0.00 sec)

master1，master2互相提升访问权限

注意：在master1上要指定master2上的日志文件名和位置参数。在m2上要反过来指定m1的。在授权的时候要随时查看

在master1上授权

MariaDB [(none)]> grant replication slave on *.* to 'replication'@'192.168.195.%' identified by 'abc123';
Query OK, 0 rows affected (0.01 sec)

MariaDB [(none)]> change master to master_host='192.168.195.137',master_user='replication',master_password='abc123',master_log_file='mysql_bin.000004',master_log_pos=491;
Query OK, 0 rows affected (0.06 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.00 sec)

在master2上授权

MariaDB [(none)]> grant replication slave on *.* to 'replication'@'192.168.195.%' identified by 'abc123';
Query OK, 0 rows affected (0.00 sec)

MariaDB [(none)]> change master to master_host='192.168.195.128',master_user='replication',master_password='abc123',master_log_file='mysql_bin.000003',master_log_pos=411;
Query OK, 0 rows affected (0.02 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.01 sec)

分别查看master1，master2服务器的主从状态

start slave;   //开启同步功能
show slave status\G;
     Slave_I0_Running: Yes                //这两个选项参数必须为yes
     Slave_SQL_Running: Yes

（4）测试主主同步，在master1上新建一个库school

MariaDB [(none)]> create database school;
Query OK, 1 row affected (0.01 sec)

在master2上可以查看到刚才创建的库school，同步已经完成

MariaDB [(none)]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| school             |
| test               |
+--------------------+
5 rows in set (0.01 sec)

（5）配置slave1，slave2作为master1的从数据库

首先查看master1的状态值

MariaDB [(none)]> show master status;
+------------------+----------+--------------+--------------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB         |
+------------------+----------+--------------+--------------------------+
| mysql_bin.000003 |      583 |              | mysql,information_schema |
+------------------+----------+--------------+--------------------------+
1 row in set (0.00 sec)

在slave1，slave2上分别设置

MariaDB [(none)]> change master to master_host='192.168.195.128',master_user='replication',master_password='abc123',master_log_file='mysql_bin.000003',master_log_pos=583;

分别查看slave1，slave2的主从状态

start slave;   //开启同步功能
show slave status\G;
     Slave_I0_Running: Yes                //这两个选项参数必须为yes
     Slave_SQL_Running: Yes

数据库服务器之间的主主复制同步，主从复制同步配置成功

3，安装配置mysql-mmm

（1）在所有服务器上yum在线安装mysql-mmm*

yum -y install mysql-mmm*

（2）安装结束后 对mmm进行配置，修改/etc/mysql-mmm/mmm_common.conf配置文件，

系统中所有主机的该配置文件的内容都是一样的，包括监控主机monitor

修改后的内容为带加粗部分

vim /etc/mysql-mmm/mmm_common.conf

active_master_role      writer


    cluster_interface       ens33
    pid_path                /run/mysql-mmm-agent.pid
    bin_path                /usr/libexec/mysql-mmm/
    replication_user        replicant
    replication_password   abc123
    agent_user              mmm_agent
    agent_password         agent


    ip     192.168.195.128
    mode    master
    peer    db2


    ip      192.168.195.137
    mode    master
    peer    db1


    ip      192.168.195.140
    mode    slave


    ip      192.168.195.141
    mode    slave


    hosts   db1, db2
    ips     192.168.195.188          //设置虚拟IP
    mode    exclusive


    hosts   db3, db4
    ips     192.168.195.200, 192.168.195.210       //设置虚拟IP
    mode    balanced

远程复制 覆盖配置文件：


scp mmm_common.conf [email protected].195.137:/etc/mysql-mmm/   

scp mmm_common.conf [email protected].195.140:/etc/mysql-mmm/ 
scp mmm_common.conf [email protected].195.141:/etc/mysql-mmm/
scp mmm_common.conf [email protected].195.142:/etc/mysql-mmm/
vim /etc/mysql-mmm/mmm_common.conf   挨个查看一下

（3）在monitor服务器上配置

cd /etc/mysql-mmm/    //改密码
vim mmm_mon.conf
ping_ips       192.168.195.128,192.168.195.137,192.168.195.140,192.168.195.141  //监视器监听的服务器地址
auto_set_online   10        //超时连接时间10秒

     monitor_user                mmm_monitor        //用户名
     monitor_password         123456                 //密码

（4）修改所有数据库的mmm_agent.conf

vim /etc/mysql-mmm/mmm_agent.conf
this db1     //分别修改为db1，db2，db3，db4

（5）在所有数据库上为mmm_agent，mmm_moniter授权

MariaDB [(none)]> grant replication client on *.* to 'mmm_monitor'@'192.168.195.%' identified by '123456';
Query OK, 0 rows affected (0.01 sec)

MariaDB [(none)]> grant super, replication client, process on *.* to 'mmm_agent'@'192.168.195.%' identified by 'agent';
Query OK, 0 rows affected (0.00 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.01 sec)

（6）启动代理和监控

在所在数据库服务器上启动mysql-mmm-agent

systemctl start mysql-mmm-agent.service

在monitor服务器上启动监控服务mysql-mmm-montior

systemctl start mysql-mmm-monitor.service

测试群集

在monitor服务器上进行测试

[root@localhost ~]# mmm_control show
  db1(192.168.195.128) master/ONLINE. Roles: writer(192.168.195.188)
  db2(192.168.195.137) master/ONLINE. Roles:
  db3(192.168.195.140) slave/ONLINE. Roles: reader(192.168.195.210)
  db4(192.168.195.141) slave/ONLINE. Roles: reader(192.168.195.200)

检测状态需要全部OK

[root@localhost ~]# mmm_control checks all
db4  ping         [last change: 2018/09/08 14:53:06]  OK
db4  mysql        [last change: 2018/09/08 14:53:06]  OK
db4  rep_threads  [last change: 2018/09/08 14:53:06]  OK
db4  rep_backlog  [last change: 2018/09/08 14:53:06]  OK: Backlog is null
db2  ping         [last change: 2018/09/08 14:53:06]  OK
db2  mysql        [last change: 2018/09/08 14:53:06]  OK
db2  rep_threads  [last change: 2018/09/08 14:53:06]  OK
db2  rep_backlog  [last change: 2018/09/08 14:53:06]  OK: Backlog is null
db3  ping         [last change: 2018/09/08 14:53:06]  OK
db3  mysql        [last change: 2018/09/08 14:53:06]  OK
db3  rep_threads  [last change: 2018/09/08 14:53:06]  OK
db3  rep_backlog  [last change: 2018/09/08 14:53:06]  OK: Backlog is null
db1  ping         [last change: 2018/09/08 14:53:06]  OK
db1  mysql        [last change: 2018/09/08 14:53:06]  OK
db1  rep_threads  [last change: 2018/09/08 14:53:06]  OK
db1  rep_backlog  [last change: 2018/09/08 14:53:06]  OK: Backlog is null

将虚拟IP：192.168.195.188切换到db2服务器上

[root@localhost ~]# mmm_control move_role writer db2
OK: Role 'writer' has been moved from 'db1' to 'db2'. Now you can wait some time and check new roles info!
[root@localhost ~]# mmm_control show
  db1(192.168.195.128) master/ONLINE. Roles:
  db2(192.168.195.137) master/ONLINE. Roles: writer(192.168.195.188)
  db3(192.168.195.140) slave/ONLINE. Roles: reader(192.168.195.210)
  db4(192.168.195.141) slave/ONLINE. Roles: reader(192.168.195.200)

模拟故障切换

1）停掉主db1数据库，等待几秒后，可以看到数据库db1处于HARD_OFFLINE（离线状态），检测不到数据库的存在

[root@localhost ~]# mmm_control show
  db1(192.168.195.128) master/HARD_OFFLINE. Roles:
  db2(192.168.195.137) master/ONLINE. Roles: writer(192.168.195.188)
  db3(192.168.195.140) slave/ONLINE. Roles: reader(192.168.195.210)
  db4(192.168.195.141) slave/ONLINE. Roles: reader(192.168.195.200)

2)停掉从db3数据库，从的虚拟IP会全部在另一台正常数据库上，

[root@localhost ~]# mmm_control show
  db1(192.168.195.128) master/HARD_OFFLINE. Roles:
  db2(192.168.195.137) master/ONLINE. Roles: writer(192.168.195.188)
  db3(192.168.195.140) slave/HARD_OFFLINE. Roles:
  db4(192.168.195.141) slave/ONLINE. Roles: reader(192.168.195.200), reader(192.168.195.210)

重新开启db3数据库，从虚拟IP又会回到原来的位置

[root@localhost ~]# mmm_control show
  db1(192.168.195.128) master/ONLINE. Roles:
  db2(192.168.195.137) master/ONLINE. Roles: writer(192.168.195.188)
  db3(192.168.195.140) slave/ONLINE. Roles: reader(192.168.195.210)
  db4(192.168.195.141) slave/ONLINE. Roles: reader(192.168.195.200)

测试数据同步状况

以监控机monitor充当客户进行远程登录mysql服务进行测试

按理来讲监控服务器只单独充当监控这一角色就行了，这里临时将它也作为客户端：


yum install -y mariadb-server mariadb

systemctl start mariadb.service

在数据库服务器上进行远程登录授权

MariaDB [(none)]> grant all on *.* to 'test'@'192.168.195.142' identified by '123123';
Query OK, 0 rows affected (0.00 sec)

MariaDB [(none)]> flush privileges;
Query OK, 0 rows affected (0.00 sec)

在monitor进行远程登录mysql服务   ，并创建一个库shujuku，

mysql -utest -p123123 -h 192.168.195.188   //虚拟IP

MariaDB [school]> create database shujuku;
Query OK, 1 row affected (0.01 sec)

登录其他四台节点，都可以看到刚创建的库shujuku，证明群集同步成功

MariaDB [school]> show databases;
+--------------------+
| Database           |
+--------------------+
| information_schema |
| mysql              |
| performance_schema |
| school             |
| shujuku            |
| test               |
+--------------------+
6 rows in set (0.00 sec)