一、数据备份

备份类型:热备份、温备份和冷备份

   热备份:读、写不受影响;

   温备份:仅可以执行读操作;

   冷备份:离线备份,读、写操作均中止;

备份方式:物理备份和逻辑备份:

   物理备份:复制数据文件,速度快,保存数据库的所有数据结构,如果数据跟数据库关联性强,

          导致物理备份可移植性能力不强;

   逻辑备份:将数据导出至文本文件中,速度慢、丢失浮点数精度;方便使用文本处理工具

          直接对其处理,可移植能力强;缺点:浮点数据可能会丢失精度;备份出的数据更占用

          存储空间;压缩后可大大节省空间;不适合对大数据库做完全备份。

备份策略:完全备份、增量备份和差异备份:

   完全备份:备份全部数据;

   增量备份:仅备份上次完全备份或者增量备份以后变化的数据;

   差异备份:仅备份上次完全备份以后变化的数据;(差异备份比增量备份所需空间大)

数据库需要备份的内容:数据、配置文件、二进制日志、事务日志


MySQL备份工具:

mysqldump:逻辑备份工具、MyISAM(温备份)、InnoDB(热备份)


   mysqldump:(备份时需加以下选项)

      --databases DB1,DB2,...  #备份那几个数据库

      --all-databases       #备份所有数据库

   MyISAM:温备份(需加选项如下)

      --lock-all-tables      #备份时锁定所有表

      --lock-tables         #备份一张表时只锁定该备份的表

   InnoDB:热备份(需加选项如下)

     --single-transaction  #执行热备份时需加该项表示是执行热备份

     --flush-logs        #备份时先滚动下日志文件

     --events           #备份事件

     --routines         #备份存储事件和函数

     --triggers         #备份触发器

   

   --master-data={0|1|2} 备份后的文件记录了日志位置(一般设置为2)


mysqlhotcopy:物理备份工具、温备份

文件系统工具:

   cp:冷备工具

   lv:逻辑卷的快照功能,几乎热备:

      mysql> FLUSH TABLES; 刷新表

       mysql>LOCK tables  锁表

   创建快照:释放锁,而后复制数据

第三方备份工具:

    ibbackup:商业工具

    xtrabackup:开源工具

Linux命令:MySQL系列之十二--MySQL备份与还原mysqldump(重要章节)_第1张图片


  、使用mysqldump命令备份(逻辑备份工具)

  mysqldump命令将数据库中的数据备份成一个文本文件。表的结构和表中的数据将存储在生成的文本文件中。

  mysqldump命令的工作原理很简单。它先查出需要备份的表的结构,再在文本文件中生成一个CREATE语句。然后,将表中的所有记录转换成一条INSERT语句。然后通过这些语句,就能够创建表并插入数据。

  1、备份一个数据库,备份前需先刷新表,并锁表,否则表修改造成备份的不一致性

  mysqldump基本语法:

  mysqldump -u username -p dbname table1 table2 ...-> BackupName.sql

  其中:

  • dbname参数表示数据库的名称;

  • table1和table2参数表示需要备份的表的名称,为空则整个数据库备份;

  • BackupName.sql参数表设计备份文件的名称,文件名前面可以加上一个绝对路径。通常将数据库被分成一个后缀名为sql的文件;

    选项:

      --master-data={0|1|2}

        0:不记录二进制日志文件及其位置;

    1:以CHANGE MASTER TO的方式记录位置,可用于恢复后直接启动从服务器;

    2:以CHANGE MASTER TO的方式记录位置,但默认为被注释掉;

   --lock-all-tables:锁定所有表

   --flush-logs:执行日志flush刷新

如果指定库中的表类型均为InnoDB,可使用--single-transaction启动热备;


  实例:使用root用户备份test数据库步骤:

第一步先刷新并锁表:

mysql> FLUSH TABLES WITH READ LOCK; #刷新表,并以读锁表

Query OK, 0 rows affected (0.00 sec)

再通过mysqldump备份表:

[root@lamp ~]# mysqldump -uroot -p test > /root/stu.sql #备份test数据库到/root目录下

Enter password: 

[root@lamp ~]# ls /root

anaconda-ks.cfg     Music      Public     Templates     stu.sql

备份完后再解锁表:

mysql> UNLOCK TABLES; #解锁表

Query OK, 0 rows affected (0.00 sec)

  文件的开头会记录MySQL的版本、备份的主机名和数据库名。

  文件中以“--”开头的都是SQL语言的注释,以"/*!40101"等形式开头的是与MySQL有关的注释。40101是MySQL数据库的版本号,如果MySQL的版本比1.11高,则/*!40101和*/之间的内容就被当做SQL命令来执行,如果比4.1.1低就会被当做注释。


*************************************************************

****实例:模拟所有库都坏掉,实现完全备份和及时点还原。

先完全备份所有数据库:

第一步先刷新并锁表:

mysql> FLUSH TABLES WITH READ LOCK; #刷新表,并以读锁表(此步骤也可以结合mysqldump一起使用,不用单独操作)--flush-logs --lock-all-tables含义一样。

Query OK, 0 rows affected (0.00 sec)

[root@lamp ~]# mysqldump -uroot -p --master-data=2 --flush-logs --all-databases --lock-all-tables > /root/alldatabases.sql #--master-data=2以CHANGE MASTER TO的方式记录位置,但默认为被注释掉,--flush-logs刷新日志文件,--all-databases备份所有库,--lock-all-tables锁定所有表,备份至/root目录下。(完全备份所有数据库)

Enter password: 

[root@lamp ~]# less /root/alldatabases.sql #查看完全备份中当前的二进制日志为000020

-- MySQL dump 10.13  Distrib 5.5.28, for Linux (x86_64)

-- Host: localhost    Database: 

-- ------------------------------------------------------

-- Server version       5.5.28-log

/*!40101 SET @OLD_CHARACTER_SET_CLIENT=@@CHARACTER_SET_CLIENT */;

/*!40101 SET @OLD_CHARACTER_SET_RESULTS=@@CHARACTER_SET_RESULTS */;

/*!40101 SET @OLD_COLLATION_CONNECTION=@@COLLATION_CONNECTION */;

/*!40101 SET NAMES utf8 */;

/*!40103 SET @OLD_TIME_ZONE=@@TIME_ZONE */;

/*!40103 SET TIME_ZONE='+00:00' */;

/*!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 */;

/*!40014 SET @OLD_FOREIGN_KEY_CHECKS=@@FOREIGN_KEY_CHECKS, FOREIGN_KEY_CHECKS=0 */;

/*!40101 SET @OLD_SQL_MODE=@@SQL_MODE, SQL_MODE='NO_AUTO_VALUE_ON_ZERO' */;

/*!40111 SET @OLD_SQL_NOTES=@@SQL_NOTES, SQL_NOTES=0 */;

-- Position to start replication or point-in-time recovery from

-- CHANGE MASTER TO MASTER_LOG_FILE='mysql-bin.000020', MASTER_LOG_POS=107;

-- Current Database: `hellodb`

CREATE DATABASE /*!32312 IF NOT EXISTS*/ `hellodb` /*!40100 DEFAULT CHARAC

................

mysql> PURGE BINARY LOGS TO 'mysql-bin.000020'; #模拟删除当前二进制之前的日志信息。(再删除前最好把日志文件保存至其他地方,以备还原至之前状态需要)

Query OK, 0 rows affected (0.01 sec)

mysql> SHOW BINARY LOGS; #查看所有日志信息,只剩下000020

+------------------+-----------+

| Log_name         | File_size |

+------------------+-----------+

| mysql-bin.000020 |       107 |

+------------------+-----------+

1 row in set (0.00 sec)

mysql> USE studb; 

Database changed

mysql> SELECT * FROM tutors; #查询表tutors的信息

+-----+------------------+--------+-----+

| TID | Tname        | Gender | Age |

+-----+------------------+--------+-----+

| 1  | HongQigong     |  M   | 93 |

| 2  | HuangYaoshi    |  M   | 63 |

| 3  | HuangRong    |  F   | 46 |

| 4  | HuYidao       |  M   | 65 |

| 5  | XiaoLongnv    |  F   | 28 |

| 6  | HuFei        |  M   | 45 |

| 7  | GuoXiang      |  F   | 32 |

+-----+------------------+--------+-----+

mysql> DELETE FROM tutors WHERE Age>80;#删除表tutors年龄大于80的行

Query OK, 1 rows affected (0.01 sec)

mysql> SELECT * FROM tutors;#查询表tutors的信息

+-----+------------------+--------+-----+

| TID | Tname        | Gender | Age |

+-----+------------------+--------+-----+

| 2  | HuangYaoshi    |  M   | 63 |

| 3  | HuangRong    |  F   | 46 |

| 4  | HuYidao       |  M   | 65 |

| 5  | XiaoLongnv    |  F   | 28 |

| 6  | HuFei        |  M   | 45 |

| 7  | GuoXiang      |  F   | 32 |

+-----+------------------+--------+-----+

mysql> \q

[root@lamp ~]# mysql -uroot -p #登录mysql

Enter password:

mysql> FLUSH LOGS; #刷新滚动日志

Query OK, 0 rows affected (0.01 sec)

mysql> \q

[root@lamp ~]# cd /mydata/data/#进入到mysql数据文件夹

[root@lamp data]# ls

hellodb  ib_logfile0  lamp.err  mydb   mysql-bin.000020  mysql-bin.index     stu  

ibdata1  ib_logfile1  lamp.pid  mysql  mysql-bin.000021  performance_schema  test

[root@lamp data]# mysqlbinlog mysql-bin.000020 > /root/mon-incremental.sql #把mysql的二进制日志文件导出成sql格式数据,并命名为第一次增量备份)

[root@lamp data]# mysql -uroot -p #登录mysql

Enter password:

mysql> USE studb;

Database changed

mysql> INSERT INTO tutors (Tname) Values ('stu123');#往表tutors插入一行数据

Query OK, 1 rows affected (0.01 sec)

mysql> \q

[root@lamp data]# ls

hellodb  ib_logfile0  lamp.err  mydb   mysql-bin.000020  mysql-bin.index  

ibdata1  ib_logfile1  lamp.pid  mysql  mysql-bin.000021  performance_schema 

[root@lamp data]# cp mysql-bin.000021 /root #复制最后一次操作的二进制日志文件至数据目录以外的目录/root

[root@lamp data]# rm -rf ./* #删除数据库的数据目录中的所有数据模拟数据库的所有库数据丢失

[root@lamp data]# ls #查看当前目录,数据已经被清空

[root@lamp data]# service mysqld stop #由于数据文件都被清空,故此时mysql无法停止,也无法启动 

MySQL server PID file could not be found!          [FAILED]

[root@lamp data]# killall mysqld #此时只能强制终止mysqld进程

[root@lamp ~]# cd /usr/local/mysql/ #进入mysql的安装目录

[root@lamp mysql]# ls

bin   data  include    lib  mysql-test  scripts  sql-bench

COPYING  docs  INSTALL-BINARY  man  README     share    support-files

[root@lamp mysql]# scripts/mysql_install_db --user=mysql --datadir=/mydata/data/ #对mysql数据库进行初始化设置,并指定相关的选项,--datadir指定数据库的数据存放目录。

Installing MySQL system tables...

OK

Filling help tables...

OK

...........

cd . ; ./bin/mysqld_safe &

You can test the MySQL daemon with mysql-test-run.pl

cd ./mysql-test ; perl mysql-test-run.pl

Please report any problems with the ./bin/mysqlbug script!

[root@lamp mysql]# service mysqld start #数据库初始化成功后重新启动数据库,因为已经初始化,所以数据库的密码为空.

Starting MySQL...                          [  OK  ]

[root@lamp mysql]# mysql < /root/alldatabases.sql #先恢复完全备份的内容

[root@lamp mysql]# mysql < /root/mon-incremental.sql #恢复第一次增量备份

[root@lamp mysql]# mysqlbinlog /root/mysql-bin.000021 > /root/temp.sql #把故障前的最后一次二进制日志导出成sql格式的数据

[root@lamp mysql]# mysql < /root/temp.sql #把二进制日志还原至数据库

至此就手动进行了一次mysql所有库的及时点备份还原恢复,但是此还原数据库的方法会导致产生很多mysql的二进制日志文件。


正确的恢复方法是:

恢复数据前,临时关闭mysql记录二进制日志功能,待恢复后再开启记录二进制日志的功能;

mysql> SET sql_log_bin=0; #临时关闭记录二进制日志功能

Query OK, 0 rows affected (0.00 sec)

mysql> \. /root/alldatabases.sql #恢复完全备份的内容(\.表示读取导入后面目录的文件内容,

也可以替换为SOURCE命令)

mysql> \. /root/mon-incremental.sql #恢复第一次增量备份

mysql> SET sql_log_bin=1; #数据库恢复完后再打开记录二进制日志功能


************************************************************************


  2、备份多个数据库

  语法:mysqldump -u username -p --all-databases > /root/back.sql :备份所有库

mysqldump -u username -p --databases dbname2 dbname2 > Backup.sql

  加上了--databases选项,然后后面跟多个数据库

mysqldump -u root -p --databases test mysql > /root/backup.sql

  3、备份所有数据库

  mysqldump命令备份所有数据库的语法如下:

mysqldump -u username -p -all-databases > /root/BackupName.sql

  示例:

mysqldump -u -root -p -all-databases > /root/all.sql

  、直接复制整个数据库目录

  MySQL有一种非常简单的备份方法,就是将MySQL中的数据库文件直接复制出来。这是最简单,速度最快的方法。

不过在此之前,要先将服务器停止,这样才可以保证在复制期间数据库的数据不会发生变化。如果在复制数据库的过程中还有数据写入,就会造成数据不一致。这种情况在开发环境可以,但是在生产环境中很难允许备份服务器。

  注意:这种方法不适用于InnoDB存储引擎的表,而对于MyISAM存储引擎的表很方便。同时,还原时MySQL的版本最好相同。

  、使用mysqlhotcopy工具快速备份(物理备份工具)

  一看名字就知道是热备份。因此,mysqlhotcopy支持不停止MySQL服务器备份。而且,mysqlhotcopy的备份方式比mysqldump快。mysqlhotcopy是一个perl脚本,主要在Linux系统下使用。其使用LOCK TABLES、FLUSH TABLES和cp来进行快速备份。

  原理:先将需要备份的数据库加上一个读锁,然后用FLUSH TABLES将内存中的数据写回到硬盘上的数据库,最后,把需要备份的数据库文件复制到目标目录。

  命令格式如下:

[root@localhost ~]#
  • dbname:数据库名称;

  • backupDir:备份到哪个文件夹下;

  常用选项:

  • --help:查看mysqlhotcopy帮助;

  • --allowold:如果备份目录下存在相同的备份文件,将旧的备份文件加上_old;

  • --keepold:如果备份目录下存在相同的备份文件,不删除旧的备份文件,而是将旧的文件更名;

  • --flushlog:本次辈分之后,将对数据库的更新记录到日志中;

  • --noindices:只备份数据文件,不备份索引文件;

  • --user=用户名:用来指定用户名,可以用-u代替;

  • --password=密码:用来指定密码,可以用-p代替。使用-p时,密码与-p之间没有空格;

  • --port=端口号:用来指定访问端口,可以用-P代替;

  • --socket=socket文件:用来指定socket文件,可以用-S代替;

  mysqlhotcopy并非mysql自带,需要安装Perl的数据库接口包;下载地址为:http://dev.mysql.com/downloads/dbi.html

  目前,该工具也仅仅能够备份MyISAM类型的表。


二、数据还原

  1、还原使用mysqldump命令备份的数据库的语法如下:

  mysql -u root -p [dbname] < backup.sql

  示例:

mysql -u root -p < C:\backup.sql

  2、还原直接复制目录的备份

  通过这种方式还原时,必须保证两个MySQL数据库的版本号是相同的。MyISAM类型的表有效,对于InnoDB类型的表不可用,InnoDB表的表空间不能直接复制。


自动备份脚本:

要求:

1,每天4点备份mysql数据;
2,为节省空间,删除超过3个月的所有备份数据;
3,删除超过7天的备份数据,保留3个月里的 10号 20号 30号的备份数据;

#创建shell文件
vim backup_mysql.sh
#!/bin/bash 
mysqldump -uroot -p --master-data=2 --flush-logs --all-databases --lock-all-tables >
 /root/dbdata/mysqlbak/`date +%Y%m%d`.sql
find /root/dbdata/mysqlbak/ -mtime +7 -name '*[1-9].sql' -exec rm -rf {} \;
find /root/dbdata/mysqlbak/ -mtime +90 -name '*.sql' -exec rm -rf {} \;
 
#创建定时任务
crontab –e
0 4 * * * /data/dbdata/backup_mysql.sh