linux系统mysql主从复制

主从复制

    • 优点
    • 原理
    • 准备环境
      • 防火墙和selinux
      • 修改主机名
      • 固定ip
      • 主机名解析
    • 清理环境
      • 清理数据库
      • 检查配置是否清理干净
    • 安装数据库
      • yum安装
      • 安装mysql
      • 初始化mysql
      • 关闭密码安全策略
      • 修改密码
    • 无数据主从复制
      • 主库服务器
        • 开启binlog服务
        • 重启数据库
        • 创建一个提供远程复制的用户
        • 查看binlog日志文件
      • 从库服务器
        • 配置server-id
        • 从库配置
        • 启动slave
        • 查看主从配置信息
      • 从库重新配置
        • 停止slave服务
        • 重新配置slave
        • 从库配置
        • 启动slave
        • 查看主从配置信息
    • 有数据主从复制
      • 主库服务器
        • 创建一个提供远程复制的用户
        • 开启binlog服务
        • 重启数据库
        • 锁表备份
        • 新开一个终端
        • 查看binlog日志文件
      • 从库服务器
        • 导入数据
        • 配置server-id
        • 从库配置
        • 启动slave
        • 查看主从配置信息
      • 从库重新配置
        • 停止slave服务
        • 重新配置slave
        • 从库配置
        • 启动slave
        • 查看主从配置信息
      • 解锁库
    • 主从复制gtid方式
      • 主库配置
        • 创建一个提供远程复制的用户
        • mysql配置文件
      • 从库配置
        • mysql配置文件
        • 从库mysql连接
    • 故障排除
      • 跳过错误码
        • 1062:主键冲突
      • uuid一致,导致io线程不启动
      • gtid导出导入数据注意

优点

MySQL主从复制的优点:

横向扩展解决方案 - 在多个从站之间分配负载以提高性能。在此环境中,所有写入和更新都必须在主服务器上进行。但是,读取可以在一个或多个从设备上进行。该模型可以提高写入性能(因为主设备专用于更新),同时显着提高了越来越多的从设备的读取速度。
数据安全性 - 因为数据被复制到从站,并且从站可以暂停复制过程,所以可以在从站上运行备份服务而不会破坏相应的主数据。
分析 - 可以在主服务器上创建实时数据,而信息分析可以在从服务器上进行,而不会影响主服务器的性能。
备份 - 可以使用从服务器数据进行备份,减轻主服务器的压力。

原理

主服务器上面的任何修改都会保存在二进制日志( Bin-log日志)里面。从服务器上面启动一个I/O线程,(5.5以后多线程) 连接到主服务器上面请求读取二进制(Bin-log)日志,然后把读取到的二进制日志写到本地的Realy-log(中继日志)里面。 从服务器上面同时开启一个SQL线程,读取Realy-log(中继日志),如果发现有更新立即把更新的内容在本机的数据库上面执行一遍。

准备环境

防火墙和selinux

systemctl stop firewalld --now && setenforce 0

修改主机名

hostnamectl set-hostname master

固定ip

cat /etc/sysconfig/network-scripts/ifcfg-ens33     //网卡配置文件

TYPE=Ethernet
PROXY_METHOD=none
BROWSER_ONLY=no
BOOTPROTO=static
DEFROUTE=yes
NAME=ens33
DEVICE=ens33
ONBOOT=yes
IPADDR=10.12.155.175       //ip地址
PREFIX=24                  //子网掩码
GATEWAY=10.12.155.254      //网关
DNS1=223.5.5.5             //dns服务器
DNS2=223.6.6.6             //dns服务器

主机名解析

vim /etc/hosts      //主机名解析文件
10.12.155.175 master
10.12.155.178 slave

清理环境

清理数据库

yum -y erase `rpm -qa | egrep "mysql|mariadb"`     //卸载mysql和mariadb

rm -rf /etc/my* && rm -rf /var/lib/mysql && rm -rf /usr/bin/mysql  //删除mysql文件

检查配置是否清理干净

[[ ! -f /etc/my.cnf ]] && [[ ! -d /var/lib/mysql ]] && [[ ! -f /usr/bin/mysql ]] && echo "环境已经清理完成" || echo "环境未清理"

安装数据库

yum安装

上传yum包,解压,进入目录

安装mysql

yum -y install *     //安装mysql

初始化mysql

systemctl start mysqld     //第一次启动mysql,也就是初始化mysql

关闭密码安全策略

vim /etc/my.cnf
validate_password=OFF   //yum安装mysql密码有安全策略,提前关闭安全策略

修改密码

mysqladmin -uroot -p"`awk '/temporary password/{p=$NF}END{print p}' /var/log/mysqld.log`" password '0'     //查找初始密码并修改密码

无数据主从复制

主库服务器

开启binlog服务
mkdir -pv /data/      //创建存放binlog日志目录

chown mysql.mysql /data      //修改目录所有者和属组

vim /etc/my.cnf           //mysql配置文件
server-id=175             //设置serverid
log-bin=/data/mysql-bin   //设置logbin日志存放目录
重启数据库
systemctl restart mysqld     //修改mysql文件,需要重启服务
创建一个提供远程复制的用户
mysql> grant replication slave on *.* to 'relication'@'%' identified by '0';  //创建一个只有复制权限的用户

mysql> flush privileges;   //刷新数据表
查看binlog日志文件
mysql> show master status\G

*************************** 1. row ***************************
             File: mysql-bin.000001
         Position: 154
     Binlog_Do_DB: 
 Binlog_Ignore_DB: 
Executed_Gtid_Set: 
1 row in set (0.00 sec)

从库服务器

配置server-id
vim /etc/my.cnf       //mysql配置文件
server-id=178         //配置server-id

systemctl restart mysqld   //重启mysql服务
从库配置
mysql> ? change master to         //查看change master服务

mysql> CHANGE MASTER TO           //配置从库连接主库信息
  MASTER_HOST='master',
  MASTER_USER='replication',
  MASTER_PASSWORD='0',
  MASTER_PORT=3306,
  MASTER_LOG_FILE='mysql-bin.000001',
  MASTER_LOG_POS=154,
  MASTER_CONNECT_RETRY=10;
启动slave
mysql>start slave;
查看主从配置信息
mysql> show slave status\G    
Slave_IO_Running: Yes    io线程启动
Slave_SQL_Running: Yes   sql线程启动

## uuid
Master_UUID: 6f6d0551-a073-11ee-9f28-000c298a6e96
mysql的uuid在数据目录下的auto.cnf文件,可以和主库的文件对比
uuidgen    //重新生成uuid
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: master
                  Master_User: relication
                  Master_Port: 3306
                Connect_Retry: 10
              Master_Log_File: mysql-bin.000001
          Read_Master_Log_Pos: 154
               Relay_Log_File: slave-relay-bin.000002
                Relay_Log_Pos: 320
        Relay_Master_Log_File: mysql-bin.000001
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: 
          Replicate_Ignore_DB: 
           Replicate_Do_Table: 
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 154
              Relay_Log_Space: 527
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 203
                  Master_UUID: 6f6d0551-a073-11ee-9f28-000c298a6e96
             Master_Info_File: /var/lib/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind: 
      Last_IO_Error_Timestamp: 
     Last_SQL_Error_Timestamp: 
               Master_SSL_Crl: 
           Master_SSL_Crlpath: 
           Retrieved_Gtid_Set: 
            Executed_Gtid_Set: 
                Auto_Position: 0
         Replicate_Rewrite_DB: 
                 Channel_Name: 
           Master_TLS_Version: 
1 row in set (0.00 sec)

从库重新配置

停止slave服务
mysql>stop slave;
重新配置slave
mysql>reset slave;
从库配置
mysql>CHANGE MASTER TO
 MASTER_HOST='master',
 MASTER_USER='relication',
 MASTER_PASSWORD='0',
 MASTER_PORT=3306,
 MASTER_LOG_FILE='mysql-bin.000001',
 MASTER_LOG_POS=154,
 MASTER_CONNECT_RETRY=10;     //尝试重新连接的时间
启动slave
mysql>start slave;
查看主从配置信息
mysql> show slave status\G    

有数据主从复制

主库服务器

创建一个提供远程复制的用户
mysql> grant replication slave on *.* to 'relication'@'%' identified by '0';  //创建一个只有复制权限的用户

mysql> flush privileges;   //刷新数据表
开启binlog服务
mkdir -pv /data/      //创建存放binlog日志目录

chown mysql.mysql /data      //修改目录所有者和属组

vim /etc/my.cnf           //mysql配置文件
server-id=175             //设置serverid
log-bin=/data/mysql-bin   //设置logbin日志存放目录
重启数据库
systemctl restart mysqld     //修改mysql文件,需要重启服务
锁表备份
mysql>flush tables with read lock;
新开一个终端
mysqldump -uroot -p0 -A > all.sql       //进行全库备份

scp all.sql 10.12.155.178:/opt          //远程拷贝
查看binlog日志文件
mysql> show master status\G

*************************** 1. row ***************************
             File: mysql-bin.000001
         Position: 154
     Binlog_Do_DB: 
 Binlog_Ignore_DB: 
Executed_Gtid_Set: 
1 row in set (0.00 sec)

从库服务器

导入数据
mysql -uroot -p0 < /opt/all.sql
配置server-id
vim /etc/my.cnf       //mysql配置文件
server-id=178         //配置server-id

systemctl restart mysqld   //重启mysql服务
从库配置
mysql> ? change master to         //查看change master服务

mysql> CHANGE MASTER TO           //配置从库连接主库信息
  MASTER_HOST='master',
  MASTER_USER='replication',
  MASTER_PASSWORD='0',
  MASTER_PORT=3306,
  MASTER_LOG_FILE='mysql-bin.000001',
  MASTER_LOG_POS=154,
  MASTER_CONNECT_RETRY=10;
启动slave
mysql>start slave;
查看主从配置信息
mysql> show slave status\G    
Slave_IO_Running: Yes    io线程启动
Slave_SQL_Running: Yes   sql线程启动

## uuid
Master_UUID: 6f6d0551-a073-11ee-9f28-000c298a6e96
mysql的uuid在数据目录下的auto.cnf文件
uuidgen    //重新生成uuid
*************************** 1. row ***************************
               Slave_IO_State: Waiting for master to send event
                  Master_Host: master
                  Master_User: relication
                  Master_Port: 3306
                Connect_Retry: 10
              Master_Log_File: mysql-bin.000001
          Read_Master_Log_Pos: 154
               Relay_Log_File: slave-relay-bin.000002
                Relay_Log_Pos: 320
        Relay_Master_Log_File: mysql-bin.000001
             Slave_IO_Running: Yes
            Slave_SQL_Running: Yes
              Replicate_Do_DB: 
          Replicate_Ignore_DB: 
           Replicate_Do_Table: 
       Replicate_Ignore_Table: 
      Replicate_Wild_Do_Table: 
  Replicate_Wild_Ignore_Table: 
                   Last_Errno: 0
                   Last_Error: 
                 Skip_Counter: 0
          Exec_Master_Log_Pos: 154
              Relay_Log_Space: 527
              Until_Condition: None
               Until_Log_File: 
                Until_Log_Pos: 0
           Master_SSL_Allowed: No
           Master_SSL_CA_File: 
           Master_SSL_CA_Path: 
              Master_SSL_Cert: 
            Master_SSL_Cipher: 
               Master_SSL_Key: 
        Seconds_Behind_Master: 0
Master_SSL_Verify_Server_Cert: No
                Last_IO_Errno: 0
                Last_IO_Error: 
               Last_SQL_Errno: 0
               Last_SQL_Error: 
  Replicate_Ignore_Server_Ids: 
             Master_Server_Id: 203
                  Master_UUID: 6f6d0551-a073-11ee-9f28-000c298a6e96
             Master_Info_File: /var/lib/mysql/master.info
                    SQL_Delay: 0
          SQL_Remaining_Delay: NULL
      Slave_SQL_Running_State: Slave has read all relay log; waiting for more updates
           Master_Retry_Count: 86400
                  Master_Bind: 
      Last_IO_Error_Timestamp: 
     Last_SQL_Error_Timestamp: 
               Master_SSL_Crl: 
           Master_SSL_Crlpath: 
           Retrieved_Gtid_Set: 
            Executed_Gtid_Set: 
                Auto_Position: 0
         Replicate_Rewrite_DB: 
                 Channel_Name: 
           Master_TLS_Version: 
1 row in set (0.00 sec)

从库重新配置

停止slave服务
mysql>stop slave;
重新配置slave
mysql> reset slave;
从库配置
mysql>CHANGE MASTER TO
 MASTER_HOST='master',
 MASTER_USER='relication',
 MASTER_PASSWORD='0',
 MASTER_PORT=3306,
 MASTER_LOG_FILE='mysql-bin.000001',
 MASTER_LOG_POS=154,
 MASTER_CONNECT_RETRY=10;     //尝试重新连接的时间
启动slave
mysql>start slave;
查看主从配置信息
mysql> show slave status\G    

解锁库

锁库后,主从配置结束要进行解锁

unlock tables;      
或者退出数据库重新登录

主从复制gtid方式

主库配置

创建一个提供远程复制的用户
mysql> grant replication slave on *.* to 'relication'@'%' identified by '0';  //创建一个只有复制权限的用户

mysql> flush privileges;   //刷新数据表
mysql配置文件
vim /etc/my.cnf

log-bin=/var/log/mysql/mysql-bin    //指定binlog日志保存目录
server-id=1                         //server

gtid_mode=ON                //打开gtid模式
enforce_gtid_consistency=1  

systemctl restart mysqld     //重启mysql配置文件

从库配置

mysql配置文件
vim /etc/my.cnf  //在配置文件中添加配置     
[mysqld]
server-id=2           //配置server-id
                    
gtid_mode=ON                  //打开gtid模式
enforce_gtid_consistency=1   

systemctl restart mysqld      //重启mysql服务
从库mysql连接
mysql> CHANGE MASTER TO
MASTER_HOST='mysql-master',
MASTER_USER='relication',
MASTER_PASSWORD='0',
MASTER_AUTO_POSITION=1;     

mysql> start slave;        //启动slave

mysql> show slave status\G     //查看主从配置信息

故障排除

跳过错误码

1062:主键冲突
方法一:从做主从架构

方法二:vim /etc/my.cnf

slave-skip-errors=1062    //跳过1062错误码

uuid一致,导致io线程不启动

致命错误:由于master和slave具有相同的mysql服务器uuid,导致I/O线程不进行;这些uuid必须不同才能使复制工作。

uuidgen   //生成一个uuid
修改uuid并重启服务

gtid导出导入数据注意

当前数据库实例中开启了 GTID 功能, 在开启有 GTID 功能的数据库实例中, 导出其中任何一个库, 如果没有显示地指定--set-gtid-purged参数, 都会提示这一行信息. 意思是默认情况下, 导出的库中含有 GTID 信息, 如果不想导出包含有 GTID 信息的数据库, 需要显示地添加--set-gtid-purged=OFF参数.

例:在导出时候添加--set-gtid-purged=OFF参数
mysqldump -uroot -p0 --set-gtid-purged=OFF -A > 文件

你可能感兴趣的:(linux,mysql,linux,mysql,运维)