MySQL备份与恢复
MySQL备份与恢复
- 数据库备份的分类
-
- 从物理与逻辑角度
- 从数据库的备份策略角度
- MySQL完全备份与恢复
-
- 常见的备份方法
- MySQL完全备份简介
- 数据库完全备份分类
- 物理冷备份与恢复步骤
- mysqldump备份和恢复
- MySQL增量备份与恢复
-
- MySQL增量备份
- MySQL数据库增量恢复
- 增量恢复的方法
- 时间点恢复
- 位置点恢复
数据库备份的分类
从物理与逻辑角度
1.物理备份：
对数据库操作系统的物理文件（如数据文件、日志文件等）的备份
物理备份方法
冷备份（脱机备份）：是在关闭数据库的时候进行的
热备份（联机备份）：数据库处于运行状态，依赖于数据库的日志文件
温备份：数据库锁定表格（不可写入但可读）的状态下进行备份操作
2.逻辑备份：
对数据库逻辑组件（如：表等数据库对象）的备份
从数据库的备份策略角度
完全备份：每次对数据库进行完整的备份
差异备份：备份自从上次完全备份之后被修改过的文件
增量备份：只有在上次完全备份或者增量备份后被修改的文件才会被备份
MySQL完全备份与恢复
常见的备份方法
物理冷备
备份时数据库处于关闭状态，直接打包数据库文件
备份速度快，恢复时也是最简单的
专业备份工具mysqldump或mysqlhotcopy
mysqldump常用的逻辑备份工具
mysqlhotcopy仅拥有备份MyISAM和ARCHIVE表
启用二进制日志进行增量备份
进行增量备份，需要刷新二进制日志
第三方工具备份
免费的MySQL热备份软件Percona XtraBackup
MySQL完全备份简介
1、是对整个数据库、数据库结构和文件结构的备份
2、保存的是备份完成时刻的数据库
3、是差异备份与增量备份的基础
4、每次对数据进行完整的备份，完全备份是增量备份的基础，完全备份保存的是备份完成时刻的数据库
- 优点
备份与恢复操作简单方便 - 缺点
数据存在大量的重复
占用大量的备份空间
备份与恢复时间长
数据库完全备份分类
物理冷备份与恢复
关闭MySQL数据库
使用tar命令直接打包数据库文件夹
直接替换现有MySQL目录即可
mysqldump备份与恢复
MySQL自带的备份工具，可方便实现对MySQL的备份
可以将指定的库、表导出为SQL脚本（.sql结尾）
使用命令MySQL导入备份的数据
物理冷备份与恢复步骤
物理冷备份其实就是将数据库下的文件复制出来，然后当文件坏掉在复制回去。
在MySQL中先创建aaa库，再创建bbb表，写入两行记录（用于验证）
create database aaa;
use aaa;
create table bbb(id int(5), name varchar(64), age int(3));
insert into bbb values(001,'zhangsan',18),(002,'lisi',19);
关闭数据库，打包备份
[root@localhost ~]# systemctl stop mysqld
[root@localhost ~]# mkdir /backup
[root@localhost ~]# tar zcf /backup/mysql_all-$(date +%F).tar.gz /usr/local/mysql/data
tar: 从成员名中删除开头的“/”
[root@localhost ~]# cd /backup/
[root@localhost backup]# ll
总用量 1436
-rw-r--r--. 1 root root 1469149 12月 24 15:39 mysql_all-2020-12-24.tar.gz
[root@localhost backup]# cd
模拟故障，启动mysql，删除aaa库
关闭mysql，将故障后的文件移动到一个目录下面做备份，在把之前压缩的文件导入到mysql目录下面
[root@localhost ~]# mkdir /oldbak
[root@localhost ~]# mv /usr/local/mysql/data/ /oldbak
[root@localhost ~]# mkdir restore
[root@localhost ~]# tar xf /backup/mysql_all-2020-12-24.tar.gz -C restore
[root@localhost ~]# mv restore/usr/local/mysql/data/ /usr/local/mysql/
启动mysql，查看
mysqldump备份和恢复
常用命令
mysqldump -u root -p --all-databses > all-data-$(date +%F).sql备份所有数据库
mysqldump -u root -p -databases auth mysql > auth-mysql.sql备份auth和mysql库
mysqldump -u root -p auth > auth-$(data +%F).sql备份auth数据库
mysqldump -u root -p mysql user > mysql-user-$(date +%F).sql备份mysql的user表
mysqldump -u root -p -d mysql user > /tmp/desc-mysql-user.sql备份mysql库user表的结构
方法一
创建一个目录用来存放文件，生aaa库的.sql备份文件（$(date +%F)代表日期）
[root@localhost ~]# mkdir /backup
[root@localhost ~]# mysqldump -uroot -p aaa > /backup/aaa-$(date +%F).sql
Enter password:
[root@localhost ~]# ll /backup/
总用量 4
-rw-r--r--. 1 root root 1855 12月 24 23:08 aaa-2020-12-24.sql
登录数据库，删除aaa库，并创建一个aab库（aab库用于还原aaa库）
mysql> drop database aaa;
mysql> create database aab;
将aaa库的数据，还原到aab上面
mysql -u root -p aab < /backup/aaa-2020-12-24.sql
方法二
方法二和方法一的区别在于，一个是在mysql外面执行命令，一个实在mysql里面执行命令；第一步不变，将第三步在mysql里面执行了，
登录mysql，创建一个abb用于还原aaa
[root@localhost ~]# mkdir /backup
mysqldump -uroot -p aaa > /backup/aaa-$(date +%F).sql
mysql> create database abb;
mysql> source /backup/aaa-2020-12-24.sql;
MySQL增量备份与恢复
MySQL增量备份
- 使用mysqldump进行完全备份存在的问题
备份数据中有重复数据
备份时间与恢复时间过长 - MySQL增量备份是自上一次备份后增加/变化的文件或者内容
- 特点
没有重复数据，备份量不大，时间短
恢复需要上次完全备份及完全备份之后所有的增量备份才能恢复，而且要对所有增量备份进行逐个反推恢复 - MySQL没有提供直接的增量备份方法
可通过MySQL提供的二进制日志间接实现增量备份 - MySQL二进制日志对备份的意义
二进制日志保存了所有更新或者可能更新数据库的操作
二进制日志在启动MySQL服务器后开始记录，并在文件达到max_binlog_size所设置的大小或者接收到flush logs命令后重新创建新的日志文件
只需定时执行flush logs方法重新创建新的日志，生成二进制文件序列，并及时把这些日志保存到安全的地方就完成了一个时间段的增量备份
MySQL数据库增量恢复
1、一般恢复
将所有备份的二进制日志内容全部恢复
2、断点恢复
基于位置恢复
数据库在某一时间点可能既有错误的操作也有正确的操作
可以基于精准的位置跳过错误的操作
基于时间点恢复
跳过某个发生错误的时间点实现数据恢复
增量恢复的方法
1、一般恢复
mysqlbinlog [–no-defaults] 增量备份文件 | mysql -u 用户名 -p
2、基于位置的恢复
恢复数据到指定位置（到错误操作前的最后一次正确操作）
mysqlbinlog --stop-position=‘操作id’ 二进制日志 | mysql -u 用户名 -p密码
从指定的位置开始恢复数据（跳过错误操作后的第一次正确操作）
mysqlbinlog --start-position=‘操作id’ 二进制日志 | mysql -u 用户名 -p密码
3、基于时间点恢复
跳过某个发生错误的时间点实现数据恢复
恢复数据到指定时间（停止错误操作的时间）
mysqlbinlog --stop-datetime=‘错误时间’ 二进制日志 | mysql -u 用户名 -p密码
从指定的位置开始恢复数据（跳过错误操作后的第一次正确操作）
mysqlbinlog --start-datetime=‘正确操作时间’ 二进制日志 | mysql -u 用户名 -p密码
例如：aab库中有一张bbb表，进行误操作，使用时间点和位置点对aaa库进行恢复
时间点恢复
[root@localhost ~]# mkdir /backadd
[root@localhost ~]# mysqldump -uroot -p aab > /backadd/aab-$(date +%F).sql;
Enter password:
[root@localhost ~]# vi /etc/my.cnf
log_bin=/usr/local/mysql/data/mysql_bin ###开启增量备份
[root@localhost ~]# systemctl restart mysqld
[root@localhost ~]# mysqladmin -uroot -p flush-logs
Enter password:
[root@localhost ~]# cd /usr/local/mysql/data/
[root@localhost data]# ll
总用量 122928
drwxr-x---. 2 mysql mysql 50 12月 24 23:34 aab
-rw-r-----. 1 mysql mysql 56 12月 22 20:13 auto.cnf
-rw-r-----. 1 mysql mysql 398 12月 25 00:29 ib_buffer_pool
-rw-r-----. 1 mysql mysql 12582912 12月 25 00:29 ibdata1
-rw-r-----. 1 mysql mysql 50331648 12月 25 00:29 ib_logfile0
-rw-r-----. 1 mysql mysql 50331648 12月 22 20:13 ib_logfile1
-rw-r-----. 1 mysql mysql 12582912 12月 25 00:29 ibtmp1
drwxr-x---. 2 mysql mysql 4096 12月 22 20:13 mysql
-rw-r-----. 1 mysql mysql 201 12月 25 00:30 mysql_bin.000001
-rw-r-----. 1 mysql mysql 154 12月 25 00:30 mysql_bin.000002
-rw-r-----. 1 mysql mysql 78 12月 25 00:30 mysql_bin.index
drwxr-x---. 2 mysql mysql 8192 12月 22 20:13 performance_schema
drwxr-x---. 2 mysql mysql 8192 12月 22 20:13 sys
[root@localhost data]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000002
[root@localhost ~]# mysql -uroot -p
Enter password:
mysql> use aab;
mysql> insert into bbb values(3,'wangwu',20);
mysql> delete from bbb where name='zhangsan';
mysql> insert into bbb values(4,'zhaoliu',21);
mysql> select * from bbb;
+------+---------+------+
| id | name | age |
+------+---------+------+
| 2 | lisi | 19 |
| 3 | wangwu | 20 |
| 4 | zhaoliu | 21 |
+------+---------+------+
3 rows in set (0.00 sec)
mysql> exit
查看日志文件，找出错误操作的时间
[root@localhost ~]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000002
# at 290
#201225 1:10:50 server id 1 end_log_pos 339 CRC32 0x6e365969 Table_map: `aab`.`bbb` mapped to number 108
# at 339
#201225 1:10:50 server id 1 end_log_pos 390 CRC32 0xed7aa8fe Write_rows: table id 108 flags: STMT_END_F
### INSERT INTO `aab`.`bbb`
### SET
### @1=3
### @2='wangwu'
### @3=20
# at 390
#201225 1:10:50 server id 1 end_log_pos 421 CRC32 0xbda85952 Xid = 35
COMMIT/*!*/;
# at 421
#201225 1:10:57 server id 1 end_log_pos 486 CRC32 0xa2f6d7dd Anonymous_GTID last_committed=1 sequence_number=2 rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 486
#201225 1:10:57 server id 1 end_log_pos 557 CRC32 0x1fc7c884 Query thread_id=5 exec_time=0 error_code=0
SET TIMESTAMP=1608829857/*!*/;
BEGIN
/*!*/;
# at 557
#201225 1:10:57 server id 1 end_log_pos 606 CRC32 0x7722812e Table_map: `aab`.`bbb` mapped to number 108
# at 606
#201225 1:10:57 server id 1 end_log_pos 659 CRC32 0x3fcc1859 Delete_rows: table id 108 flags: STMT_END_F
### DELETE FROM `aab`.`bbb`
### WHERE
### @1=1
### @2='zhangsan'
### @3=18
# at 659
#201225 1:10:57 server id 1 end_log_pos 690 CRC32 0x9a53ac9f Xid = 36
COMMIT/*!*/;
# at 690
#201225 1:11:05 server id 1 end_log_pos 755 CRC32 0x021d858a Anonymous_GTID last_committed=2 sequence_number=3 rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 755
#201225 1:11:05 server id 1 end_log_pos 826 CRC32 0xce1488e1 Query thread_id=5 exec_time=0 error_code=0
SET TIMESTAMP=1608829865/*!*/;
BEGIN
/*!*/;
# at 826
#201225 1:11:05 server id 1 end_log_pos 875 CRC32 0xc29894e3 Table_map: `aab`.`bbb` mapped to number 108
# at 875
#201225 1:11:05 server id 1 end_log_pos 927 CRC32 0xc60fad5f Write_rows: table id 108 flags: STMT_END_F
### INSERT INTO `aab`.`bbb`
### SET
### @1=4
### @2='zhaoliu'
### @3=21
# at 927
#201225 1:11:05 server id 1 end_log_pos 958 CRC32 0x63183223 Xid = 37
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
/*!50003 SET COMPLETION_TYPE=@OLD_COMPLETION_TYPE*/;
/*!50530 SET @@SESSION.PSEUDO_SLAVE_MODE=0*/;
根据日志文件，选择错误开始的时间停止，结束的时间再次开始
[root@mysql1 data]# mysql -u root -p aab < /backadd/aab-2020-12-25.sql
Enter password:
[root@mysql1 data]# mysqlbinlog --no-defaults --stop-datetime='2020-12-25 1:10:57' /usr/local/mysql/data/mysql_bin.000002 | mysql -u root -p
Enter password:
[root@mysql1 data]# mysqlbinlog --no-defaults --start-datetime='2020-12-25 1:11:05' /usr/local/mysql/data/mysql_bin.000002 | mysql -u root -p
Enter password:
[root@mysql1 data]# mysql -uroot -p
Enter password:
mysql> use aab;
mysql> select * from bbb;
+------+----------+------+
| id | name | age |
+------+----------+------+
| 1 | zhangsan | 18 |
| 2 | lisi | 19 |
| 3 | wangwu | 20 |
| 4 | zhaoliu | 21 |
+------+----------+------+
3 rows in set (0.00 sec)
mysql>
位置点恢复
删除上次完全备份，继续位置点恢复
[root@localhost ~]# mysqldump -uroot -p aab > /backadd/aab-$(date +%F).sql;
Enter password:
[root@localhost ~]# mysql -uroot -p
Enter password:
mysql> delete from bbb where name='lisi';
mysql> delete from bbb where name='zhaoliu';
mysql> select * from bbb;
+------+----------+------+
| id | name | age |
+------+----------+------+
| 1 | zhangsan | 18 |
| 3 | wangwu | 20 |
+------+----------+------+
2 rows in set (0.00 sec)
mysql>
[root@localhost ~]# mysqlbinlog --no-defaults --base64-output=decode-rows -v /usr/local/mysql/data/mysql_bin.000003
# at 3046
#201225 2:00:46 server id 1 end_log_pos 3117 CRC32 0x4303408c Query thread_id=23 exec_time=0 error_code=0
SET TIMESTAMP=1608832846/*!*/;
SET @@session.foreign_key_checks=1, @@session.unique_checks=1/*!*/;
SET @@session.sql_mode=1437073414/*!*/;
BEGIN
/*!*/;
# at 3117
#201225 2:00:46 server id 1 end_log_pos 3166 CRC32 0x8d78ab95 Table_map: `aab`.`bbb` mapped to number 228
# at 3166
#201225 2:00:46 server id 1 end_log_pos 3215 CRC32 0x0ce99fc8 Delete_rows: table id 228 flags: STMT_END_F
### DELETE FROM `aab`.`bbb`
### WHERE
### @1=2
### @2='lisi'
### @3=19
# at 3215
#201225 2:00:46 server id 1 end_log_pos 3246 CRC32 0xc1104294 Xid = 431
COMMIT/*!*/;
# at 3246
#201225 2:00:53 server id 1 end_log_pos 3311 CRC32 0xd0516911 Anonymous_GTID last_committed=13 sequence_number=14 rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 3311
#201225 2:00:53 server id 1 end_log_pos 3382 CRC32 0x6cfba9e5 Query thread_id=23 exec_time=0 error_code=0
SET TIMESTAMP=1608832853/*!*/;
BEGIN
/*!*/;
# at 3382
#201225 2:00:53 server id 1 end_log_pos 3431 CRC32 0xac5b4dfd Table_map: `aab`.`bbb` mapped to number 228
# at 3431
#201225 2:00:53 server id 1 end_log_pos 3483 CRC32 0xb4e5a86b Delete_rows: table id 228 flags: STMT_END_F
### DELETE FROM `aab`.`bbb`
### WHERE
### @1=4
### @2='zhaoliu'
### @3=21
# at 3483
#201225 2:00:53 server id 1 end_log_pos 3514 CRC32 0xe9615bfd Xid = 432
COMMIT/*!*/;
# at 3514
#201225 2:02:32 server id 1 end_log_pos 3579 CRC32 0x5621480f Anonymous_GTID last_committed=14 sequence_number=15 rbr_only=yes
/*!50718 SET TRANSACTION ISOLATION LEVEL READ COMMITTED*//*!*/;
SET @@SESSION.GTID_NEXT= 'ANONYMOUS'/*!*/;
# at 3579
#201225 2:02:32 server id 1 end_log_pos 3650 CRC32 0x23187ce0 Query thread_id=23 exec_time=0 error_code=0
SET TIMESTAMP=1608832952/*!*/;
BEGIN
/*!*/;
# at 3650
#201225 2:02:32 server id 1 end_log_pos 3699 CRC32 0x0ea405c0 Table_map: `aab`.`bbb` mapped to number 228
# at 3699
#201225 2:02:32 server id 1 end_log_pos 3748 CRC32 0x1b6c1955 Write_rows: table id 228 flags: STMT_END_F
### INSERT INTO `aab`.`bbb`
### SET
### @1=5
### @2='test'
### @3=23
# at 3748
#201225 2:02:32 server id 1 end_log_pos 3779 CRC32 0x910b70f2 Xid = 433
COMMIT/*!*/;
SET @@SESSION.GTID_NEXT= 'AUTOMATIC' /* added by mysqlbinlog */ /*!*/;
DELIMITER ;
# End of log file
[root@localhost ~]#
[root@localhost ~]# mysql -u root -p aab < /backadd/aab-2020-12-25.sql
Enter password:
[root@localhost ~]# mysqlbinlog --no-defaults --stop-position='290' /usr/local/mysql/data/mysql_bin.000003 | mysql -u root -p
Enter password:
[root@localhost ~]# mysqlbinlog --no-defaults --start-position='656' /usr/local/mysql/data/mysql_bin.000003 | mysql -u root -p
Enter password:
[root@localhost ~]# mysql -uroot -p
Enter password:
