【MySQL 日志管理、备份与恢复】

---

一、数据库备份的分类

1、从物理与逻辑的角度

1.1、物理备份: 对数据库操作系统的物理文件（如数据文件，日志文件等）的备份

物理备份的方法
·冷备份(脱份)是在关闭数据库的时候进行的

·热备份(联机备份):数据库处于运行状态，依赖于数据库的日志文件

·温备份:数据库锁定表格(不可写入但可读)的状态下进行备份操作

1.2、逻辑备份

对数据库逻辑组件（如：表等数据库对象）的备份

2、从数据库的备份策略角度

完全备份：每次对数据库进行完整的备份

差异备份：只备份上一次完全备份后的更新数据文件

增量备份:每次备份只备份上一次完全备份或增量备份后的最新数据

3、常见的备份方法

3.1、物理冷备

备份是数据库处于关闭状态，直接打包数据库文件

备份速度快，恢复时也是最简单的

3.2、专用备份工具mysqldump 或者 mysqlhotcopy

mysqldump 常用的逻辑备份工具

mysqlhotcopy 仅仅拥有备份MylSAM 和 ARCHIVE表

3.3、启用二进制日志进行增量备份

进行增量备份，需要刷新二进制日志

3.4、第三方工具备份

免费的MySQL 热备份软件 Percona XtraBackup

二、MySQL 完全备份与恢复

模拟实验

创建一个表结构

create table if not exists info1 (
id int(4) not null auto_increment,
name varchar(10) not null,
sex char(10) not null,
hobby varchar(50),
primary key (id));

1、MySQL 完全备份

创建一个表的数据

insert into dznb01 values (1,'小钱','男',25,'JAVA');

insert into dznb01 values (2,'小陈','男',24,'C++');

insert into dznb01 values (3,'小王','男',26,'csgo');

insert into dznb01 values (4,'小州','男',23,'LOL');

insert into dznb01 values (5,'小薛','男',22,'使命召唤');

InnoDB存储引擎的数据库在磁盘上存储成三个文件：db.opt(表属性文件)、表名.frm(表结构文件)、表名.ibd(表数据文件)。

打包备份文件数据的文件使用的tar 命令的集合

tar zcvf  归档文件   原数据文件/目录       gzip
    jcvf                                bzip2
	  Jcvf                                xz

数据迁移   体量小      物理冷备    打包备份+恢复
          体量中等    DTS
			   体量超大     数据魔方

1、 物理冷备份与恢复

在进行备份操作时候要先关闭mysql 服务

systemctl stop mysqld

进入mysql 目录文件里进行打包数据库的文件

cd /usr/local/mysql
ls
#查看到有一个data目录

tar zcvf /opt/mysql_data-$(date +%Y%m%d).tar.gz data/
#使用tar命令直接以年月日为结尾的压缩文件名进行打包数据库的文件

打包后可以使用以下命令进行查看

tar xf 压缩包

以迁移的方式进行数据库的恢复

用另一台主机进行迁移操作，在新的主机上没有需要的数据库

使用源主机使用scp 命令进行迁移压缩文件操作

使用另一台主机查看有没有收到迁移的压缩文件

在进行解压恢复之前要先将主机的mysql服务关闭

进入迁移的主机里的数据库，查看迁移的数据有没有传过来

2．mysqldump 备份与恢复

mysqldump 命令对单个库进行完全备份

mysqldump-u 用户名-p[密码][选项[数据库名 >/备份路径/备份文件名

（1）完全备份一个或多个完整的库（包括其中所有的表）

mysqldump -u root -p[密码] --databases 库名1 [库名2] … > /备份路径/备份文件名.sql

创键一个存放备份文件的目录

在指定路径的后面写入dznb.sql 文件名存放数据库

mysqldump -uroot -pabc123 --databases dznb > /opt/backup/dznb.sql

进入dznb.sql文件里查看备份的文件

（2）完全备份 MySQL 服务器中所有的库

mysqldump -u root -p[密码] --all-databases > /备份路径/备份文件名.sql

例如：

mysqldump -uroot -pabc123 --all-databases > /opt/backup/all-mysql.sql

备份所有库的文件

（3）完全备份指定库中的部分表（不包含创建库的操作）

mysqldump -u root -p[密码] 库名 [表名1] [表名2] … > /备份路径/备份文件名.sql

例如:

mysqldump -uroot -p[-d]abc123 dznb dznb01 >/opt/backup/dznb_dznb01.sql

#使用“-d”选项，说明只保存数据库的表结构
#不使用“-d”选项，说明表数据也进行备份

（4）查看备份文件

grep -v "^--" /opt/backup/dznb_dznb01.sql | grep -v "^/" | grep -v "^$"

2、MySQL 完全恢复

使用mysqldump 到出的脚本，可以使用的导入方法

source 命令

mysql 命令

使用source 命令来进行恢复数据库的步骤

登录到mysql数据库

执行source备份sql脚本的路径

进行恢复之前要先开启mysql服务

systemctl start mysqld

（1）恢复数据库

#“-e”选项，用于指定连接 MySQL 后执行的命令，命令执行完后自动退出

mysql -uroot -pabc123 -e "show databases;"

在不进入数据库查看拥有的数据库

在不进入数据库查看所对应的表

mysql -uroot -pabc123 -e "show tables from dznb;"

不进入数据库查看表的数据内容

mysql -uroot -pabc123 -e "select * from dznb.dznb01;"

使用source命令来进行模拟

恢复完后进行查看有没有设置成功

使用表数据恢复的话不介意用什么库

使用source 命令进行恢复数据库的数据

source /opt/backup/dznb.sql

使用mysql 命令 从定向输入的方式也能进行恢复数据库

mysql -uroot -pabc123 < /opt/backup/dznb.sql 

（2）恢复数据表

在opt 目录里有个backup目录 里面备份一个表的文件，后面就可以使用该路径来进行恢复表内容

mysqldump -u root -p 库名 表名 > /opt/创建备份的名字.sql

当备份文件中只包含表的备份，而不包含创建的库的语句时，执行导入操作时必须指定库名，且目标库必须存在。

mysqldump -u root -pabc123 dznb dznb01 > /opt/backup/dznb_dznb01.sql

三、MySQL 日志管理

1、设置mysql的配置文件

MySQL 的日志默认保存位置为 /usr/local/mysql/data

vim /etc/my.cnf
[mysqld]
##错误日志，用来记录当MySQL启动、停止或运行时发生的错误信息，默认已开启
log-error=/usr/local/mysql/data/mysql_error.log					#指定日志的保存位置和文件名

##通用查询日志，用来记录MySQL的所有连接和语句，默认是关闭的
general_log=ON
general_log_file=/usr/local/mysql/data/mysql_general.log

##二进制日志(binlog)，用来记录所有更新了数据或者已经潜在更新了数据的语句，记录了数据的更改，可用于数据恢复，默认已开启
log-bin=mysql-bin				#也可以 log_bin=mysql-bin

##慢查询日志，用来记录所有执行时间超过long_query_time秒的语句，可以找到哪些查询语句执行时间长，以便于优化，默认是关闭的
slow_query_log=ON
slow_query_log_file=/usr/local/mysql/data/mysql_slow_query.log
long_query_time=5												#设置超过5秒执行的语句被记录，缺省时为10秒

查看通用查询日志是否开启

show variables like 'general%';	

查看二进制日志是否开启

show variables like 'log_bin%';

查看慢查询日功能是否开启

show variables like '%slow%';

查看慢查询时间设置

show variables like 'long_query_time';

2、添加日志文件的方法

进入mysql 的data目录里可以看见以下的几个日志的文件

mysql-bin.000001 #二进制查询文件
mysql-bin.index  #记录二进制日志的序列号
mysql_error.log  #错误日志
mysql_general.log  #通用查询日志

生成二进制文件的方法

重新启动mysql服务后就可以自动生成一个二进制文件

进入这个文件里可以看见二进制文件的序号，最底下的就是最新的二进制文件

vim mysql-bin.index

查看二进制日志文件

 mysqlbinlog --no-defaults --base64-output=decode-rows -v  二进制日志文件

刷新二进制日志

mysqladmin -uXXX -pXXX flush-logs

3、命令实验

创建一个存放完成备份的目录文件位置，在创建一个存放增量备份的目录文件位置

1．一般恢复

设置一个完成备份，在设置一个增量备份，使用备份文件时要先进行刷新操作，给二进制文件备份的时候要备份刷新前的一个文件，因为刷新后的文件是空文件

mysqladmin -uroot -pabc123 flush-logs

进行恢复实验

备份的第一天数据

恢复第二天备份的数据

#指定第二天的增量备份二进制文件
mysqlbinlog --no-defaults mysql-bin-20230621 | mysql -uroot -pabc123

恢复第三天的增量文件

2．断点恢复

将备份的二进制文件输出到指定的文件中，进去查看可以看见用户信息

mysqlbinlog --no-defaults --base64-output=decode-rows -v mysql-bin-20230622 > mysql-bin-20230622.txt

例：
# at 300
#230620 15:04:15
插入了“猪”的用户数据

# at 596
#230620 15:04:28
插入了“小钱”的用户数据

（1）基于位置恢复

#仅恢复到操作 ID 为“596”之后的数据，即不恢复“猪”的数据

仅恢复“猪”的数据，跳过“小钱”的数据恢复

mysqlbinlog --no-defaults --stop-position='596'  mysql-bin-20230622 |mysql -uroot -pabc123

（2）基于时间点恢复

仅恢复到 15:04:28 之前的数据，即不恢复“小钱用户”的数据

仅恢复“小钱”的数据，跳过“猪”的数据恢复

mysqlbinlog --no-defaults --start-datetime='2023-06-20 15:04:28'  mysql-bin-20230622 |mysql -uroot -pabc123