Xtrabackup工具的原理及其实战

Xtrabackup是一个对InnoDB做数据备份的工具，支持在线热备份（备份时不影响数据读写），是商业备份工具InnoDBHotbackup的一个很好的替代品。

 

Xtrabackup有两个主要的工具：xtrabackup、innobackupex

（1）xtrabackup只能备份InnoDB和XtraDB两种数据表，而不能备份MyISAM数据表

（2）innobackupex-1.5.1则封装了xtrabackup，是一个脚本封装，所以能同时备份处理innodb和myisam，但在处理myisam时需要加一个读锁，还有就是myisam不支持增量备份。

 

原理：

innobackupex工具的备份过程原理图：

1 首先会启动一个xtrabackup_log后台检测的进程，实时检测mysql redo的变化，一旦发现redo有新的日志写入，立刻将日志写入到日志文件xtrabackup_log中

2 复制innodb的数据文件和系统表空间文件idbdata1到对应的以默认时间戳为备份目录的地方

3 复制结束后，执行flush table with read lock操作

4 复制.frm .myd .myi文件

5 并且在这一时刻获得binary log 的位置

6 将表进行解锁unlock tables

7 停止xtrabackup_log进程

 

全库恢复的过程：

这一阶段会启动xtrabackup内嵌的innodb实例，将xtrabackup日志xtrabackup_Log进行回放，将提交的事务信息变更应用到innodb数据或表空间，同时回滚未提交的事务

 

增量备份：

增量备份主要是通过拷贝innodb中有变更的页(指的是LSN大于xtrabackup_checkpoints中的LSN号)。增量备份是基于全备的，第一次增量备份的数据是基于上一次全备，之后的每一次增倍都是基于上一次的增倍，最终达到一致性的增倍，增倍的过程中，和全备很类似，区别在于第二步。

 

增量备份的恢复：

和全库恢复类似，也需要两步

1数据文件的恢复 分3部分 全备 增量备份和xtrabackup_log

2对未提交事务的回滚

 

官方网站：https://www.percona.com/

 

使用：

安装：

       安装支持库。

              yum -y  install cmake gcc gcc-c++ libaio libaio-develautomake autoconf  bison libtoolncurses-devel libgcrypt-devel libev-devel libcurl* perl-Time-HiRes perl-DBIperl-DBD-MySQL perl-IO-Socket-SSL numactl rsync libev

              三种安装方法：

（1）   yum 安装：

yum install xtrabackup

 

（2）   rpm包安装：

在官网下载适合自己系统和mysql版本的rpm包：

https://www.percona.com/downloads/XtraBackup/LATEST/

然后进行安装

#rpm -ivh *

 

（3）   源码包安装：

在官网下载适合自己系统和mysql版本的源码包：

https://www.percona.com/downloads/XtraBackup/LATEST/

#tar -zxvf percona-xtrabackup-2.2.13.tar.gz

#cd percona-xtrabackup-2.2.13/

#cmake -DBUILD_CONFIG=xtrabackup_release-DWITH_MAN_PAGES=OFF && make--DINSTALL_LAYOUT=/usr/local/xtrabackup

#make

#make install 

 

 

      配置：

           创建mysql的备份用户：

                     > CREATEUSER 'backup'@'localhost' IDENTIFIED BY 'passwd';

> GRANTSUPER, RELOAD, LOCK TABLES,PROCESS,REPLICATION CLIENT ON *.* TO 'backup'@'localhost';

> FLUSHPRIVILEGES;

 

       备份：

              Innobackupex 参数

                     常用参数：

                            --defaults-file=mysql配置文件

                            --copy-back=恢复时指定备份的文件路径

                            --stream=压缩方式

                            --databases=备份的数据库，不指定默认全库备份

                            --user=数据库备份用户

                            --password=用户密码

                            --port=端口

                            --slave-info 备份从库时使用

                            --socket=mysql socket文件路径

                            --compress--compress-threads=压缩级别

 

              全量备份：

# innobackupex --defaults-file=/etc/my.cnf--user=backup --password=passwd /mysql_backup/

 

              全量恢复：

1、 停止数据库

2、 删除数据库中的数据文件和日志文件（不删除恢复可能会报错）

3、 如有压缩则解压后在恢复

4、 先恢复日志：

# innobackupex--apply-log /mysql_backup/备份目录

5、 再恢复数据：

# innobackupex--copy-back /mysql_backup/备份目录 --defaults-file=/etc/my.cnf

6、 给予数据库目录相关权限

#chown -Rmysql:mysql /usr/local/mysql/data

7、 启动数据库

 

 

增量备份：

1、 全量备份

2、 增量备份，第一次

# innobackupex--defaults-file=/etc/my.cnf --user=backup --password=passwd --incremental/mysql_backup/ --incremental-basedir=/mysql_backup/完整备份的目录

3、 增量备份，第二次

# innobackupex--defaults-file=/etc/my.cnf --user=backup --password=passwd --incremental/mysql_backup/ --incremental-basedir=/mysql_backup/第一次增量备份的目录

 

              增量恢复：

1、 删除数据库中的数据文件和日志文件（不删除恢复可能会报错）

2、 全量日志恢复（开始恢复的增量备份要添加--redo-only参数,到最后一次增量备份要去掉--redo-only）

# innobackupex--apply-log --redo-only /mysql_backup/完整备份目录

3、 增量1的日志恢复到全量中

#innobackupex--apply-log --redo-only /mysql_backup/全量备份目录 --incremental-dir=/mysql_backup/增量1目录

4、 增量2的日志恢复恢复到全量中

# innobackupex--apply-log /mysql_backup/全量备份目录--incremental-dir=/mysql_backup/增量2目录

5、 完整操作，增量整合，回滚未提交的数据

6、 #innobackupex --apply-log /mysql_backup/完整备份目录

7、 再恢复数据：

# innobackupex--copy-back /mysql_backup/完整备份目录 --defaults-file=/etc/my.cnf

8、 给予数据库目录相关权限

#chown -Rmysql:mysql /usr/local/mysql/data

9、 启动数据库