使用innobackupex备份mysql数据库

1  因为使用perl脚本编写，安装前应先安装

yum install perl-Time-HiRes -y

yum -y install perl-DBD-MySQL.x86_64

 

一起安装    yum -y install perl perl-devel libaio libaio-devel perl-Time-HiRes perl-DBD-MySQL

2  安装最新版，使用rpm -ivh 命令

tar包下载地址

http://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.2.10/binary/redhat/6/x86_64/Percona-XtraBackup-2.2.10-re623acb-el6-x86_64-bundle.tar

rpm -ivh percona-xtrabackup-2.2.10-1.el6.x86_64.rpm

3  测试安装是否成功

yum list | grep percona

 

4  多实例备份

通常一般都直接使用innobackupex，因为它能同时备份InnoDB和MyISAM引擎的表。要注意的是my.cnf里datadir

（这一点很重要，在多实例中最好的解决方式为复制my.cnf到/backup/config文件夹下，配置--defaults-file=/back/config/my.cnf(3306.cnf)）

这个参数是必须要指定的，xtrabackup_55是根据它去定位innodb数据文件的位置

4.1  创建备份目录

 

# mkdir -p /backup/{config,full,incremental}

          config：    存放my.cnf    可以直接将文件复制到config目录下

                             cp /etc/my.cnf  /backup/config/3306.cnf

               full：    全备份目录

incremental：    增量备份目录

 

备份参数详解：

1

innobackupex

[--sleep=MS] [--compress[=LEVEL]] [--include=REGEXP] [--user=NAME] 

[--password=WORD] [--port=PORT] [--socket=SOCKET] [--no-timestamp]

[--ibbackup=IBBACKUP-BINARY] [--slave-info] [--stream=tar] 

[--defaults-file=MY.CNF] [--databases=LIST] [--remote-host=HOSTNAME] 

BACKUP-ROOT-DIR 

2

回滚未提交的事务，先执行此句再恢复数据

innobackupex 

--apply-log [--use-memory=MB] [--uncompress] 

[--defaults-file=MY.CNF] [--ibbackup=IBBACKUP-BINARY]

BACKUP-DIR 

3

innobackupex --copy-back [--defaults-file=MY.CNF] BACKUP-DIR

 

各参数说明：

 

--defaults-file

同xtrabackup的--defaults-file参数

 

--apply-log

对xtrabackup的--prepare参数的封装

 

--copy-back

做数据恢复时将备份数据文件拷贝到MySQL服务器的datadir ；

 

--remote-host=HOSTNAME

通过ssh将备份数据存储到进程服务器上；

 

--stream=[tar]

 

备份文件输出格式, tar时使用tar4ibd , 该文件可在XtarBackup binary文件中获得.如果备份时有指定--stream=tar, 则tar4ibd文件所处目录一定要在$PATH中(因为使用的是tar4ibd去压缩, 在XtraBackup的binary包中可获得该文件)。

 

在使用参数stream=tar备份的时候，你的xtrabackup_logfile可能会临时放在/tmp目录下，如果你备份的时候并发写入较大的话xtrabackup_logfile可能会很大(5G+)，很可能会撑满你的/tmp目录，可以通过参数--tmpdir指定目录来解决这个问题。

 

--tmpdir=DIRECTORY

 

当有指定--remote-host or --stream时, 事务日志临时存储的目录, 默认采用MySQL配置文件中所指定的临时目录tmpdir

 

--redo-only --apply-log组,

 

强制备份日志时只redo ,跳过rollback。这在做增量备份时非常必要。

 

--use-memory=#

 

该参数在prepare的时候使用，控制prepare时innodb实例使用的内存量

 

--throttle=IOS

 

同xtrabackup的--throttle参数

 

--sleep=是给ibbackup使用的，指定每备份1M数据，过程停止拷贝多少毫秒，也是为了在备份时尽量减小对正常业务的影响，具体可以查看ibbackup的手册 ；

 

--compress[=LEVEL]

对备份数据迚行压缩，仅支持ibbackup，xtrabackup还没有实现；

 

--include=REGEXP

对xtrabackup参数--tables的封装，也支持ibbackup。备份包含的库表，例如：--include="test.*"，意思是要备份test库中所有的表。如果需要全备份，则省略这个参数；如果需要备份test库下的2个表：test1和test2,则写成：--include="test.test1|test.test2"。也可以使用通配符，如：--include="test.test*"。

 

--databases=LIST

列出需要备份的databases，如果没有指定该参数，所有包含MyISAM和InnoDB表的database都会被备份；

 

--uncompress

解压备份的数据文件，支持ibbackup，xtrabackup还没有实现该功能；

 

--slave-info,

备份从库, 加上--slave-info备份目录下会多生成一个xtrabackup_slave_info 文件, 这里会保存主日志文件以及偏移, 文件内容类似于:CHANGE MASTER TO MASTER_LOG_FILE='', MASTER_LOG_POS=0

 

--socket=SOCKET

指定mysql.sock所在位置，以便备份进程登录mysql.

 

4.2  全量备份

方式1普通方式

 #innobackupex --defaults-file=/backup/config/3306.cnf --no-lock --user=harri --password 

--socket=/var/lib/mysql/mysql_3306.sock /backup/full/

注 --no-lock为备份中不锁表

此时表明成功

 

方式2备份并打包压缩

innobackupex --user=harri --password --defaults-file=/backup/config/3306.cnf  --socket=/var/lib/mysql/mysql_3306.sock --stream=tar /backup/full/  2>/backup/full/eg.log | gzip     1>/backup/full/eg.tar.gz

     

      说明：

      --database=单独对zztx数据库做备份 ，若是不添加此参数那就那就是对全库做备份

      2>/backup/full/eg.log  输出信息写入日志中

     1>/backup/full/eg.tar.gz 打包压缩存储到该文件中

这种备份时间会比较长，主要是执行压缩操作。这种方式打的包需要使用tar izxvf解压。参数-i是必须加上的。

     

      此处可以写个脚本做备份(backup.sh)

      #!/bin/sh

      echo "开始备份..."`date`

      log=zztx01_`date +%y%m%d%H%M`.log

      str=zztx01_`date +%y%m%d%H%M`.tar.gz

      innobackupex --user=root --password=123456 --defaults-file=/etc/my.cnf --database=zztx --stream=tar /data/back_data/ 2>/data/back_data/$log | gzip 1>/data/back_data/$str

      echo "备份完毕..."`date`

 

方式3（未测试）

备份到远程服务器

innobackupex  --database="testinnodb test"  --user=root --defaults-file=/data0/mysql/my.cnf  --no-lock --stream=tar /data0/backup/mysql/|ssh [email protected]  cat ">"/data0/backup.tar

 

 

4.3  备份恢复

 

1 关闭mysql服务

2 解压 tar -izxvf zztx.tar.gz -C /backup/full/  需要mkdir 文件夹

3

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --no-lock /backup/full/(--apply-log选项的命令是准备在一个备份上启动mysql服务)

（此步骤为恢复前的准备）

 

 innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --copy-back --no-lock /backup/full/  (--copy-back 选项的命令从备份目录拷贝数据,索引,日志到my.cnf文   件里规定的初始位置。)

4.chown -R mysql.mysql data （此步骤一定要有）

5重启数据库，完成恢复

 

 

多实例注意事项 ： 对于my.cnf   [mysqld]结点下配置datadir路径，根据恢复的实例不同，此处的路径应该做相应的修改。

 

 

增量备份

（增量备份的前提是有一个全量备份，在全量备份的基础上进行增量备份）

第一次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock 

 --no-lock --incremental /backup/incremental/ --incremental-basedir=/backup/full/

 

第二次增量备份

#innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock  --no-lock --incremental /backup/incremental/ --incremental-basedir=/backup/incremental/2015-05-12_17-31-45/

 

参数说明：

 

1 2	--incremental ：指定存储本次增量备份的目录 --incremental-basedir：上次备份的存储目录

 

4.4  增量备份恢复操作

 

1 关闭mysql服务

2

*（在全备上，使用—redo-only只做已提交事务，不回滚未提交事务，准备过程中除了最后一个不需要此参数，其他都需要，增量备份一定要确定顺序，否则会破坏备份，切记，不确定顺序可以去数据目录下查看xtrabackup_checkpoints文件）

预备阶段：

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/(--apply-log选项的命令是准备在一个备份上启动mysql服务)

还原第一次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/2015-05-12_18-07-37/  --incremental-dir=/backup/incremental/2015-05-12_18-09-32/

还原第二次增量备份

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --redo-only --no-lock /backup/full/2015-05-12_18-07-37/ --incremental-dir=/backup/incremental/2015-05-12_18-09-32/

 

注：1、在增量备份还原过程中，预备阶段最后一个增量的还原不需要 --redo-only 参数 如果忘记了，那么最后还要执行一遍

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --apply-log --no-lock /backup/full/

回滚所有未提交事务

    2、还原增量备份前要先对完备进行 --apply-log --redo-only 然后才可以对每个增量做归并

    3、有可能提示加入mysql版本参数，根据提示添加即可     --ibbackup=xtrabackup_56

 

还原阶段

预备阶段完成后只需要对合成的总备份文件进行还原数据即可

innobackupex  --defaults-file=/backup/config/3306.cnf --socket=/var/lib/mysql/mysql_3306.sock --copy-back /backup/full/2015-05-12_18-07-37/

 

4.chown -R mysql.mysql data （此步骤一定要有）

5重启数据库，完成恢复

 

 

 

4.5  部分备份与还原

 

操作前说明：

xtrabackup可以使用部分备份，但是只能在一个表一个文件（独立表空间）的状况下才能使用，设置mysql选项：innodb_file_per_table。

还原部分备份使用表导入的方式，而不是—copy-back选项。

尽管很多场景下可以通过直接复制文件的方式，但是会产生一致性问题不建议使用。

 

1  创建部分备份

 

部分备份有3个选项可以使用：

--include:设置正则表达式的格式，匹配的就备份

--table-file:在文件中指定要备份的表，然后通过这个选项传入文件

--database:指定数据库列表

 

使用include方式

include 方式数据库名也可以匹配：

$ innobackupex --include='^mydatabase[.]mytable' /path/to/backup                 

这个选项是传给xtrabackup –tables，所有的数据库目录都会被创建，但是里面可能是空的。

 

使用tables-file方式

如:

$ echo "mydatabase.mytable" > /tmp/tables.txt

$ innobackupex --tables-file=/tmp/tables.txt /path/to/backup

这个选项是应用xtrabackup –tablefile，只有匹配到表的数据库目录才会被创建

 

使用database方式

innobackupex可以传递用空格隔开的数组，格式为：databasename[.tablename]

$ innobackupex --databases="mydatabase.mytable mysql" /path/to/backup

 

注意：--databases选项只会对非innodb引擎表和frm文件产生影响，对于innodb数据文件总是备份的