mysql主从，半同步，主主复制

MySQL Replication

我们知道，MySQL数据库的二进制日志记录着每一个明确或者潜在可能导致数据库发生改变的sql语句，

因此我们可以基于二进制日志来实现mysql的主从一致。而我们在此提到的mysql的复制的简单过程就是：

首先mysql的主服务器（Master）上有一个叫dump的线程，负责将二进制日志读取进来，发送给slave. 

而后mysql的从服务器（Slave）上有个I/O线程 ,负责接收Master传送过来的二进制日志数据,

并且将此写入到本地的中继日志中,此时会有一个SQL线程,每次中继日志读取一句sql语句, 

并在从Slave上应用，以实现主从服务器的一致。

 

首先需要提供2台mysql版本一致的mysql服务器，在此选用的mysql-5.5.20,平台为redhat5.4

 

一、安装mysql-5.5.20

 

# groupadd -r mysql  

# useradd -g mysql -r -s /sbin/nologin –M mysql          

                                           //新建用户以安全方式运行进程

# chown -R mysql:mysql /mydata/data

 

# tar xf mysql-5.5.20-linux2.6-i686.tar.gz -C /usr/local  

                                          //将下载好的mysql软件解压安装

# cd /usr/local/

# ln -sv mysql-5.5.20-linux2.6-i686  mysql

# cd mysql 

 

# chown -R mysql:mysql  .

# scripts/mysql_install_db --user=mysql --datadir=/mydata/mysql

//初始化mysql,此处使用的/mydata/mysql存放mysql的数据,建议将/mydata挂载至一个逻辑卷,方便数据备份

# chown -R root  .

 

# cd /usr/local/mysql

# cp support-files/my-large.cnf  /etc/my.cnf

#vim /etc/my.cnf

thread_concurrency = 2        //修改此项,我们的cpu为双核的

datadir = /mydata/data        //添加此项,指定数据存放的目录

# cp support-files/mysql.server  /etc/rc.d/init.d/mysqld

# chkconfig --add mysqld

# chkconfig mysqld on

 

 

二：为使用mysql的安装符合系统使用规范，并将其开发组件导出给系统使用，需如下操作

 

#vim/etc/man.config            //输出mysql的man手册至man命令的查找路径

MANPATH  /usr/local/mysql/man     //添加此行

# ln -sv /usr/local/mysql/include  /usr/include/mysql 

                           //输出mysql的头文件至系统头文件路径/usr/include

# echo '/usr/local/mysql/lib' > /etc/ld.so.conf.d/mysql.conf  

                            //输出mysql的库文件给系统库查找路径

# ldconfig            //让系统重新载入系统库

#vim /etc/profile          //修改PATH环境变量，让系统可以直接使用mysql的相关命令

PATH=$PATH:/usr/local/mysql/bin      //添加此行

 

三：实现主从复制

master ip：192.168.1.10

slave ip：192.168.1.11

 

On Master ：(在主服务器的操作)

 #vim /etc/my.cnf    确保证如下选项:

 server-id = 1   //主服务器的身份标识

 log-bin=mysql-bin  //开启二进制日志

 sync_binlog=1       //事务提交立即写入到二进制日志

 innodb_flush_logs_at_trx_commit=1 //事务提交之时，立即将二进制日志写入磁盘

 #mysql –uroot –p   

 mysql> grant replication client,replication slave on *.* to cclo@’192.168.1.%’ identified by ‘12345’; 

  //此处创建一个用户名为cclo,密码为12345的用户,其权限为client和replication

 mysql> flush privileges;

 mysql> show grants for cclo@’192.168.1.%’; //验证此用户的权限 

 

On Slave:(在从服务器的操作)

 #vim /etc/my.cnf

 [mysqld]

 server-id       = 11    // 数值只要保证和Master不同即可

 #log-bin=mysql-bin     //slave的二进制日志一般用不到,暂时关闭

 relay-log=relay-bin    //开启中继日志

 relay-log-index=relay-bin.index 

 read_only=1            //此项为阻止普通用户写从服务器

 skip_slave_start=1  

           //mysql服务关闭后,当服务开启时跳过自动启动主从复制(如需自动启动,此项略过)

 #service mysqld restart

 

 mysql> show master status;  //此步在主服务器上操作，查询二进制日志的文件名及位置

 +------------------+----------+--------------+------------------+  

 | File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |  

 +------------------+----------+--------------+------------------+  

 | MySQL-bin.000003 |      374 |              |                  |   

 +------------------+----------+--------------+------------------+  

 1 row in set (0.00 sec) 

mysql> change master to master_host='192.168.1.10',master_user='cclo',master_password='12345',master_log_file='mysql-bin.000003',master_log_pos=374;  

                               //指定Master的ip及复制的用户及二进制日志的位置

 mysq> start slave;                //启动主从复制

 mysql > show slave status;       //查询从服务器的工作属性,确保以下2项

 Slave_IO_Runing: Yes

 Slave_SQL_Runing: Yes        //确保此2项为Yes的状态

 

 

 

四: mysql的主从复制为异步模式,容易产生延迟,在此介绍设置主从复制为半同步模式的方法

On Master: 

 mysql> install plugin rpl_semi_sync_master soname 'semisync_master.so';                      //实现半同步,需要此模块

 mysql> SET GLOBAL rpl_semi_sync_master_enabled = 1;  

 mysql> SET GLOBAL rpl_semi_sync_master_timeout = 1000;  

                               //此时全局变量为临时生效,永久生效操作如下:

 #vim /etc/my.cnf

 [mysqld]  

 rpl_semi_sync_master_enabled=1  

 rpl_semi_sync_master_timeout=1000 

 

On Slave :

 mysql> install plugin rpl_semi_sync_slave soname 'semisync_slave.so';  

 mysql> SET GLOBAL rpl_semi_sync_slave_enabled = 1;  

                                         //临时生效,永久生效操作如下:

 #vim /etc/my.cnf

 [mysqld]  

 rpl_semi_sync_slave_enabled=1

 mysql> stop slave;

 mysql>start slave;            //重启slave线程

 

半同步的配置到此,以下为检测配置是否成功

mysql> show global status like 'rpl_semi%';      

                                       //查看从服务器上的semi_sync是否开启

 Rpl_semi_sync_slave-status  |  ON //保证此项为ON的状态

mysql> show global status like 'rpl_semi%'; 

 Rpl_semi_sync_master_status |  ON

 Rpl_semi_sync_master_clients |  1

   //查看主服务器上的semi_sync是否开启且clients应变为1, 证明主从半同步复制连接成功

 

五：mysql实现主主架构的复制

1 在两台服务器上各自建立一个具有复制权限的用户

On server1：

 mysql> grant replication client,replication slave on *.* to cclo1@’192.168.1.%’ identified by ‘12345’;  

On server2：

 mysql> grant replication client,replication slave on *.* to cclo2@’192.168.1.%’ identified by ‘12345’;

 

2 修改配置文件/etc/my.cnf，之后重启mysql（#service mysqld restart）

On server1：

 #vim /etc/my.cnf

 [mysqld]

 server-id = 10

 log-bin = mysql-bin

 auto-increment-increment = 2      

 auto-increment-offset = 1 

On server2：

 #vim /etc/my.cnf

 [mysqld]

 server-id = 20

 log-bin = mysql-bin

 auto-increment-increment = 2

 auto-increment-offset = 2

注：

auto-increment-increment的值应设为整个结构中服务器的总数，本案例用到两台服务器，所以值设为2。

auto-increment-offset是用来设定数据库中自动增长的起点的，回为这两能服务器都设定了一次自动增长值2，所以它们的起点必须得不同，这样才能避免两台服务器数据同步时出现主键冲突。

 

3 如果此时两台服务器均为新建立，且无其它写入操作，各服务器接下来指定对另一台服务器为自己的主服务器即可实现主主复制。

On server1：

mysql> show master status;  

+------------------+----------+--------------+------------------+  

| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |  

+------------------+----------+--------------+------------------+  

| MySQL-bin.000003 |      374 |              |                  |   

+------------------+----------+--------------+------------------+  

1 row in set (0.00 sec)

 mysql> change master to master_host=’192.168.1.12’,master_user=’cclo2’,master_password=’12345’, master_log_file='mysql-bin.000003',master_log_pos=374;

On server2：

mysql> show master status;  

+------------------+----------+--------------+------------------+  

| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |  

+------------------+----------+--------------+------------------+  

| MySQL-bin.000003 |      374 |              |                  |   

+------------------+----------+--------------+------------------+  

1 row in set (0.00 sec)

 mysql> change master to master_host=’192.168.1.11’,master_user=’cclo1’,master_password=’12345’, master_log_file='mysql-bin.000003',master_log_pos=374;

 

 

4 开启复制，在两台server上分别执行

mysql>start slave；

mysql>show slave status\G     //如出现如下2个线程都为yes，即配置成功

 Slave_IO_Running: Yes

 Slave_SQL_Running: Yes

 

到此,mysql的主从复制,及半同步复制和主主复制已基本实现. 

附:

1:如果在跨越互联网进行数据复制的时候，最好使用ssl，双方进行认证,以实现数据的安全传输.

2:如果Master已经运行了一段时间，而添加一台新的Slave，要实现主从复制，就需要先备份Master上的数据，然后迁移给从服务器，再通过二进制日志进行时间点恢复记录，之后再实现主从复制,(须记录备份时刻的主服务器二进制日志的文件名及文件的位置)，当然如果是要主主复制，也是需要让2台server上的数据保持一致，之后记录二进制日志文件名及其位置，再change mater。

3:对于数据库复制过滤，需要用到的参数

binlog-do-db=          //仅复制某个数据库,=后面加上数据库名字

binlog-ignore-db=      //仅忽略某个数据库,=后面加上数据库名字

replicate_do_db=       //仅复制某个库

replicate_igonore_db=  //仅忽略某个库

 

4：主主架构是不需要中继日志