LNMP架构(11)-基于GTID的主从复制

 一、主从复制存在的问题以及解决办法

问题:

主库宕机之后,数据可能会丢失

从库只有一个sql Thread,主库写压力大,复制很可能延时

解决方法:

半同步复制--解决数据丢失的问题

并行复制--解决从库复制延时的问题

1.数据库同步是怎样进行的?

master用户写入数据,生成event记到binary log中.
slave接收master上传来的binlog,然后按顺序应用,重现master上的用户操作。

2.数据库是靠什么同步的?

主从复制,默认是通过pos复制(postion),就是说在日志文档里,将用户进行的每一项操作都进行编号(pos),每一个event都有一个起始编号,一个终止编号,我们在配置主从复制时从节点时,要输入master的log_pos值就是这个原因,要求它从哪个pos开始同步数据库里的数据,这也是传统复制技术, MySQL5.6增加了GTID复制,GTID就是类似于pos的一个作用,不过它是整个mysql复制架构全局通用的,就是说在这整个mysql冗余架构中,它们的日志文件里事件的GTID值是一致的.

3.从节点怎么知道要从哪块进行同步?

上面也说了,一开始是自己设置的从节点从主节点的日志文件里的pos开始复制,以后就自己去读取上一次同步到哪一块,接着同步.

4:pos与GTID有什么区别?

两者都是日志文件里事件的一个标志,如果将整个mysql集群看作一个整体,pos就是局部的,GTID就是全局的。

二、GTID的概念

  1. 全局事务标识:global transaction identifiers
  2. GTID是一个事务一一对应,并且全局唯一ID。
  3. 一个GTID在一个服务器上只执行一次,避免重复执行导致数据混乱或者主从不一致。
  4. GTID用来代替传统复制方法,不再使用MASTER_LOG_FILE+MASTER_LOG_POS开启。
  5. 而是使用MASTER_AUTO_POSTION=1的方式开始复制。
  6. MySQL-5.6.5开始支持的,MySQL-5.6.10后开始完善。

三、GTID的组成

GTID = source_id:transaction_id
  • source_id,用于鉴别原服务器,即mysql服务器唯一的的server_uuid,由于GTID会传递到slave,所以也可以理解为源ID。
  • transaction_id,为当前服务器上已提交事务的一个序列号,通常从1开始自增长的序列,一个数值对应一个事务。

#示例:

3E11FA47-71CA-11E1-9E33-C80AA9429562:23

前面的一串为服务器的server_uuid,即3E11FA47-71CA-11E1-9E33-C80AA9429562,后面的23transaction_id

四、GTID的优势

  1. 更简单的实现failover,不用以前那样在需要找log_file和log_pos。
  2. 更简单的搭建主从复制。
  3. 比传统的复制更加安全。
  4. GTID是连续的没有空洞的,保证数据的一致性,零丢失
  5. 借助GTID,在发生主备切换的情况下,MySQL的其它Slave可以自动在新主上找到正确的复制位置,这大大简化了复杂复制拓扑下集群的维护,也减少了人为设置复制位置发生误操作的风险。另外,基于GTID的复制可以忽略已经执行过的事务,减少了数据发生不一致的风险。

五、GTID的工作原理

  1. 当一个事务在主库端执行并提交时,产生GTID,一同记录到binlog日志中。
  2. binlog传输到slave,并存储到slave的relaylog后,读取这个GTID的这个值设置gtid_next变量,即告诉Slave,下一个要执行的GTID值。
  3. sql线程从relay log中获取GTID,然后对比slave端的binlog是否有该GTID。
  4. 如果有记录,说明该GTID的事务已经执行,slave会忽略。
  5. 如果没有记录,slave就会执行该GTID事务,并记录该GTID到自身的binlog,在读取执行事务前会先检查其他session持有该GTID,确保不被重复执行。在解析过程中会判断是否有主键,如果有就用二级索引,如果没有就用全部扫描。

六.GTID的主从复制配置

(1)主机master的配置

主机server2的配置
[root@server2 ~]# vim /etc/my.cnf
[mysqld]
basedir=/usr/local/lnmp/mysql
datadir=/data/mysql
socket=/data/mysql/mysql.sock
#skip-grant-tables
server-id=1
log-bin=mysql-bin
gtid_mode=ON       开启GTID模式
enforce-gtid-consistency=ON  开启GTID模式
## 
## include all files from the config directory
##
#!includedir /etc/my.cnf.d
[root@server2 ~]# /etc/init.d/mysqld stop
Shutting down MySQL........... SUCCESS! 
[root@server2 ~]# /etc/init.d/mysqld start

[root@server2 ~]# mysql [email protected]
mysql> show variables like 'gtid%';  查看gtid是否开启
+----------------------------------+-----------+
| Variable_name                    | Value     |
+----------------------------------+-----------+
| gtid_executed                    |           |
| gtid_executed_compression_period | 1000      |
| gtid_mode                        | ON        |
| gtid_next                        | AUTOMATIC |
| gtid_owned                       |           |
| gtid_purged                      |           |
+----------------------------------+-----------+
6 rows in set (0.01 sec)

 (2)slave的配置

slave的配置
[root@server1 mysql]# vim /etc/my.cnf
[mysqld]
basedir=/usr/local/lnmp/mysql
datadir=/data/mysql
socket=/data/mysql/mysql.sock
#skip-grant-tables
server-id=2
log-bin=mysql-bin
gtid_mode=ON       开启GTID模式
enforce-gtid-consistency=ON  开启GTID模式
## 
## include all files from the config directory
##
#!includedir /etc/my.cnf.d
[root@server1 mysql]# /etc/init.d/mysqld stop
CShutting down MySQL.. SUCCESS! 
[root@server1 mysql]# /etc/init.d/mysqld start
mysql -P 
mysql> stop slave;     先停掉slave
Query OK, 0 rows affected (0.01 sec)
mysql> change master to           配置SLAVE
    -> master_host='172.25.2.3',
    -> master_user='repl',
    -> master_password='[email protected]',
    -> master_auto_position=1;
Query OK, 0 rows affected, 2 warnings (0.01 sec)
mysql> start slave;
Query OK, 0 rows affected (0.00 sec)
mysql> show slave status\G;
            Slave_IO_Running: Yes
            Slave_SQL_Running: Yes

 

 

你可能感兴趣的:(企业自动化运维架构)