mysql xtrabackup在线备份还原（全备+增备）

工具安装：
[root@mysqlserver var]# tar -xvf Percona-XtraBackup-2.3.4-re80c779-el6-x86_64-bundle.tar   --解压包
percona-xtrabackup-2.3.4-1.el6.x86_64.rpm
percona-xtrabackup-debuginfo-2.3.4-1.el6.x86_64.rpm
percona-xtrabackup-test-2.3.4-1.el6.x86_64.rpm

[root@mysqlserver var]# rpm -ivh percona-xtrabackup-2.3.4-1.el6.x86_64.rpm
warning: percona-xtrabackup-2.3.4-1.el6.x86_64.rpm: Header V4 DSA/SHA1 Signature, key ID cd2efd2a: NOKEY
error: Failed dependencies:
libev.so.4()(64bit) is needed by percona-xtrabackup-2.3.4-1.el6.x86_64
perl(DBD::mysql) is needed by percona-xtrabackup-2.3.4-1.el6.x86_64


http://rpmfind.net/linux/rpm2html/search.php?query=libev.so.4()(64bit)  --下载libev.so

[root@mysqlserver var]# rpm -ivh libev-4.04-2.el6.x86_64.rpm
warning: libev-4.04-2.el6.x86_64.rpm: Header V4 DSA/SHA1 Signature, key ID 66534c2b: NOKEY
Preparing...                ########################################### [100%]
   1:libev                  ########################################### [100%]

[root@mysqlserver var]# yum list |grep  perl-DBD
perl-DBD-MySQL.x86_64                  4.013-3.el6                      base   
perl-DBD-Pg.x86_64                     2.15.1-4.el6_3                   base   
perl-DBD-SQLite.x86_64                 1.27-3.el6                       base  

[root@mysqlserver var]# yum install perl-DBD-MySQL.x86_64

[root@mysqlserver var]# rpm -ivh percona-xtrabackup-2.3.4-1.el6.x86_64.rpm   ---安装成功！
warning: percona-xtrabackup-2.3.4-1.el6.x86_64.rpm: Header V4 DSA/SHA1 Signature, key ID cd2efd2a: NOKEY
Preparing...                ########################################### [100%]
   1:percona-xtrabackup     ########################################### [100%]


备份还原基本思路：
1.全备
  xtrabackup --defaults-file=/etc/my.cnf --backup --target-dir=/backup/xtrabackup/full

2.增量备份1 
  xtrabackup --defaults-file=/etc/my.cnf --backup --target-dir=/backup/xtrabackup/full/  --incremental-dir=/backup/xtrabackup/increm1

3.增量备份2 
  xtrabackup --defaults-file=/etc/my.cnf --backup --target-dir=/backup/xtrabackup/full/  --incremental-dir=/backup/xtrabackup/increm2

还原--只需要还原上一次全备和最后一次增量备份即可。
 
  另外一种，就是备份增量备份1--2之间的数据
  xtrabackup --defauls-file=/etc/my.cnf --backup --target-dir=/backup/xtrabackup/increm2 --incremental-basedir=/backup/xtrabackup/increm1
  
4.更多增量备份

5.应用日志0 
  xtrabackup --defaults-file=/etc/my.cnf  --apply-log --redo-only --target-dir=/backup/xtrabackup/full

6.应用日志1
  xtrabackup --defaults-file=/etc/my.cnf --apply-log --redo-only --target-dir=/backup/xtrabackup/full --incremental-dir=/backup/xtrabackup/increm1
 
7.应用日志2
  xtrabackup --defaults-file=/etc/my.cnf   --apply-log  --target-dir=/backup/xtrabackup/full --incremental-dir=/backup/xtrabackup/increm2

8.将数据copy回去
  xtrabackup --defaults-file=/etc/my.cnf  --copy-back --target-dir=/backup/xtrabackup/full

 
说明：
1）增量备份仅针对InnoDB这类支持事务的引擎，对于MyISAM等引擎，则仍然是全备了。
2）使用此方法备份，会包含flush tables操作，生产上若有长查询或者表死锁，可能导致长时间无法结束备份，要注意观察


---------------------自己实际测试-------------
os：centos7.0
mysql：5.7.10
xtrabackup:percona-xtrabackup-24-2.4.1-1.el6.x86_64.rpm

1.第一次全备
此时数据库内有5张表：t1  t2  milestat  miletest   t_timetest 库名 testdb
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' /mysql_bak/full

生成了一个时间戳文件夹：/mysql_bak/full/2016-04-08_17-20-10
total 12340
-rw-r-----. 1 root root      412 Apr  8 17:20 backup-my.cnf
-rw-r-----. 1 root root      361 Apr  8 17:20 ib_buffer_pool
-rw-r-----. 1 root root 12582912 Apr  8 17:20 ibdata1
drwxr-x---. 2 root root     4096 Apr  8 17:20 mysql
drwxr-x---. 2 root root     8192 Apr  8 17:20 performance_schema
drwxr-x---. 2 root root     8192 Apr  8 17:20 sys
drwxr-x---. 2 root root     4096 Apr  8 17:20 testdb
-rw-r-----. 1 root root      113 Apr  8 17:20 xtrabackup_checkpoints
-rw-r-----. 1 root root      452 Apr  8 17:20 xtrabackup_info
-rw-r-----. 1 root root     2560 Apr  8 17:20 xtrabackup_logfile

[root@kafka1 2016-04-08_17-20-10]# cat xtrabackup_checkpoints  ---记录了备份的开始和结束的位置
backup_type = full-backuped   ---备份类型
from_lsn = 0        --备份开始点
to_lsn = 2520447    ---备份结束点
last_lsn = 2520456
compact = 0
recover_binlog_info = 0

2.做一些操作后，第一次增备
drop table t1;
drop table t2;

innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --incremental
--incremental-basedir=/mysql_bak/full/2016-04-08_17-20-10  /mysql_bak/zengliang1

cd /mysql_bak/zengliang1/2016-04-08_17-31-18/  --也生成了一个时间戳目录
total 12340
-rw-r-----. 1 root root      412 Apr  8 17:28 backup-my.cnf
-rw-r-----. 1 root root      361 Apr  8 17:28 ib_buffer_pool
-rw-r-----. 1 root root 12582912 Apr  8 17:28 ibdata1
drwxr-x---. 2 root root     4096 Apr  8 17:28 mysql
drwxr-x---. 2 root root     8192 Apr  8 17:28 performance_schema
drwxr-x---. 2 root root     8192 Apr  8 17:28 sys
drwxr-x---. 2 root root     4096 Apr  8 17:28 testdb
-rw-r-----. 1 root root      113 Apr  8 17:28 xtrabackup_checkpoints
-rw-r-----. 1 root root      526 Apr  8 17:28 xtrabackup_info
-rw-r-----. 1 root root     2560 Apr  8 17:28 xtrabackup_logfile
[root@kafka1 2016-04-08_17-31-18]# cat xtrabackup_checkpoints
backup_type = incremental   --备份类型
from_lsn = 2520447          --备份开始点 （与全备的位置对上了）
to_lsn = 2528700            --备份结束点
last_lsn = 2528709
compact = 0
recover_binlog_info = 0

3.做一些操作后，第二次增备
create table t3(id int primary key,name varchar(10)) engine=innodb;
create table t4(id int primary key,name varchar(10)) engine=innodb;

备份的是第一次增备到第二次增备之间的内容：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --incremental
--incremental-basedir=/mysql_bak/zengliang1/2016-04-08_17-31-18  /mysql_bak/zengliang2

cat /mysql_bak/zengliang2/2016-04-08_17-37-53/xtrabackup_checkpoints
backup_type = incremental
from_lsn = 2528700         --备份开始点(与第一次增备的结束点对上了)
to_lsn = 2536798           --备份结束点
last_lsn = 2536807
compact = 0
recover_binlog_info = 0


也可以直接备份全备到此刻的内容：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --incremental
--incremental-basedir=/mysql_bak/full/2016-04-08_17-20-10  /mysql_bak/zengliang2

4.插入一些数据，第三次增备
mysql> insert into t3 values(1,'haha'),(2,'enen');
Query OK, 2 rows affected (0.09 sec)
Records: 2  Duplicates: 0  Warnings: 0

mysql> select * from t3;
+----+------+
| id | name |
+----+------+
|  1 | haha |
|  2 | enen |
+----+------+
2 rows in set (0.00 sec)

innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --incremental --incremental-basedir=/mysql_bak/zengliang2/2016-04-08_17-37-53  /mysql_bak/zengliang3

[root@kafka1 zengliang3]# cd 2016-04-11_10-26-18/
[root@kafka1 2016-04-11_10-26-18]# cat xtrabackup_checkpoints
backup_type = incremental
from_lsn = 2536798          ---备份开始点（第二次增备的结束点）
to_lsn = 2540333            --备份结束点
last_lsn = 2540342
compact = 0
recover_binlog_info = 0

最后插入两条数据：
mysql> insert into t3 values(3,'test'),(4,'gei');  ---无备份
Query OK, 2 rows affected (0.05 sec)
Records: 2  Duplicates: 0  Warnings: 0


5.准备恢复：
因为就在这台机器上恢复，因此一些目录需要移走。

停止服务：service mysql57 stop
移动目录 mv data data_old   /usr/local/mysql下的
         mkdir data

应用全备日志：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --apply-log --redo-only /mysql_bak/full/2016-04-08_17-20-10

应用第一次增备日志：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --apply-log --redo-only /mysql_bak/full/2016-04-08_17-20-10 --incremental-dir=/mysql_bak/zengliang1/2016-04-08_17-31-18

恢复数据：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --copy-back /mysql_bak/full/2016-04-08_17-20-10

或者拷贝full目录下所有到data目录 cp -r * /usr/local/mysql/data

修改权限：chown -R mysql:mysql data

启动数据库，恢复全备+第一次增备：
[root@kafka1 mysql]# service mysql57 start
Starting MySQL.. SUCCESS!
[root@kafka1 mysql]# /usr/local/mysql/bin/mysql -uroot -p
mysql> use testdb
mysql> show tables;
+------------------+
| Tables_in_testdb |
+------------------+
| milestat         |
| miletest         |
| t_timetest       |
+------------------+
5 rows in set (0.00 sec) --删除了t1和t2表


上面是一次性做完，但是我们可能后续都是每天做增备，利用后续增备在原来基础上恢复。

第二次增备的日志应用：
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --apply-log --redo-only /mysql_bak/full/2016-04-08_17-20-10 --incremental-dir=/mysql_bak/zengliang2/2016-04-08_17-37-53

第三次增备的日志应用:
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --apply-log  /mysql_bak/full/2016-04-08_17-20-10 --incremental-dir=/mysql_bak/zengliang3/2016-04-11_10-26-18
最后一次的应用日志， 并且回滚进行崩溃恢复过程(没有--redo-only选项):

停止服务：service mysql57 stop

数据恢复：mv data data_old2
         mkdir data 
         chown mysql:mysql data
innobackupex --defaults-file=/etc/my.cnf  --user='root' --password='root' --copy-back /mysql_bak/full/2016-04-08_17-20-10

修改权限：chown -R mysql:mysql data

启动服务：service mysql57 start
mysql> use testdb;
Reading table information for completion of table and column names
You can turn off this feature to get a quicker startup with -A

Database changed
mysql> show tables;
+------------------+
| Tables_in_testdb |
+------------------+
| milestat         |
| miletest         |
| t3               |
| t4               |
| t_timetest       |
+------------------+      ---已经应用了所有的日志，t1,t2删除，t3.t4创建，t3两条记录插入。
5 rows in set (0.00 sec)

mysql> select * from t3;
+----+------+
| id | name |
+----+------+
|  1 | haha |
|  2 | enen |
+----+------+
2 rows in set (0.01 sec) 


日常可以使用此工具进行全备+增备+binlog，进行mysql库的不完全备份恢复，由于测试时，并没有开通binlog日志，因此后续没有测试，但使用mysqlbinlog命令恢复，还是比较简单的， 可以参考如下：

--获取增量之后的log position 
SHELL> cd /hotbak/inc/ 
SHELL> more xtrabackup_binlog_info 
inst3606bin.000001      774 
 
--使用stop-datetime去将日志追加到指定时刻
mysqlbinlog /data/inst3606/log/bin/inst3606bin.000001 --start-position=774 --stop-datetime="2014-12-25 11:53:54" \ 
> |mysql -urobin -pxxx -P3606 -S /tmp/mysql3606.sock