Xtrabackup 实现数据的备份与恢复

头像
民工哥
    阅读 7 分钟
    6

    Xtrabackup介绍

    Xtrabackup是由percona开源的免费数据库热备份软件，它能对InnoDB数据库和XtraDB存储引擎的数据库非阻塞地备份（对于MyISAM的备份同样需要加表锁）；mysqldump备份方式是采用的逻辑备份，其最大的缺陷是备份和恢复速度较慢，如果数据库大于50G，mysqldump备份就不太适合。

    Xtrabackup安装完成后有4个可执行文件，其中2个比较重要的备份工具是innobackupex、xtrabackup

    1）xtrabackup 是专门用来备份InnoDB表的，和mysql server没有交互；

    2）innobackupex 是一个封装xtrabackup的Perl脚本，支持同时备份innodb和myisam，但在对myisam备份时需要加一个全局的读锁。

    3）xbcrypt 加密解密备份工具

    4）xbstream 流传打包传输工具，类似tar

    Xtrabackup优点

    1）备份速度快，物理备份可靠

    2）备份过程不会打断正在执行的事务（无需锁表）

    3）能够基于压缩等功能节约磁盘空间和流量

    4）自动备份校验

    5）还原速度快

    6）可以流传将备份传输到另外一台机器上

    7）在不增加服务器负载的情况备份数据

    Xtrabackup备份原理

    备份开始时首先会开启一个后台检测进程，实时检测mysq redo的变化，一旦发现有新的日志写入，立刻将日志记入后台日志文件xtrabackup_log中，之后复制innodb的数据文件一系统表空间文件ibdatax，复制结束后，将执行flush tables with readlock,然后复制.frm MYI MYD等文件，最后执行unlock tables,最终停止xtrabackup_log

    输出如下提示信息

    xtrabackup: Transaction log of lsn (2543172) to (2543181) was copied.

    171205 10:17:52 completed OK!

    Xtrabackup增量备份介绍

    xtrabackup增量备份的原理是：

    1)、首先完成一个完全备份，并记录下此时检查点LSN；

    2)、然后增量备份时，比较表空间中每个页的LSN是否大于上次备份的LSN，若是则备份该页并记录当前检查点的LSN。

    增量备份优点：

    1)、数据库太大没有足够的空间全量备份，增量备份能有效节省空间，并且效率高；

    2)、支持热备份，备份过程不锁表（针对InnoDB而言），不阻塞数据库的读写；

    3)、每日备份只产生少量数据，也可采用远程备份，节省本地空间；

    4)、备份恢复基于文件操作，降低直接对数据库操作风险；

    5)、备份效率更高，恢复效率更高。

    Xtrabackup安装

    下载安装xtrabackup

    wget https://www.percona.com/downloads/XtraBackup/Percona-XtraBackup-2.4.9/binary/redhat/6/x86_64/Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar

[root@centos ~]# ll

total 703528

-rw-r--r-- 1 root root 654007697 Sep 27 09:18 mysql-5.7.17-linux-glibc2.5-x86_64.tar.gz

-rw-r--r-- 1 root root  65689600 Nov 30 00:11 Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar

[root@centos ~]# tar xf Percona-XtraBackup-2.4.9-ra467167cdd4-el6-x86_64-bundle.tar

[root@centos ~]# yum install percona-xtrabackup-24-2.4.9-1.el6.x86\_64.rpm -y

[root@centos ~]# which xtrabackup 

/usr/bin/xtrabackup

[root@centos ~]# innobackupex -v

innobackupex version 2.4.9 Linux (x86\_64) (revision id: a467167cdd4)

#已经安装完成

    创建测试数据

    mysql> create database test;

Query OK, 1 row affected (0.00 sec)

mysql> use test;

Database changed

mysql> create table T1 (name varchar(10) not null,sex varchar(10) not null);

Query OK, 0 rows affected (0.15 sec)

mysql> insert into T1 values('zhang','man');

Query OK, 1 row affected (0.01 sec)

mysql> insert into T1 values('zhan','man');

Query OK, 1 row affected (0.01 sec)

mysql> insert into T1 values('sun','woman');

Query OK, 1 row affected (0.00 sec)

    Xtrabackup全量备份与恢复

    [root@centos ~]# innobackupex --defaults-file=/etc/my.cnf --user=root --password="123456" --backup /root

    从备份过程截图可以看出会创建一个时间的目录

    [root@centos ~]# ll /root/2017-12-04_13-57-29/

total 12352

-rw-r----- 1 root root   425 Dec  4 13:57 backup-my.cnf

-rw-r----- 1 root root  322 Dec  4 13:57 ib_buffer_pool

-rw-r----- 1 root root 12582912 Dec  4 13:57 ibdata1

drwxr-x--- 2 root root  4096 Dec  4 13:57 mysql

drwxr-x--- 2 root root   4096 Dec  4 13:57 performance_schema

drwxr-x--- 2 root root   12288 Dec  4 13:57 sys

drwxr-x--- 2 root root   4096 Dec  4 13:57 test

-rw-r----- 1 root root    22 Dec  4 13:57 xtrabackup_binlog_info

-rw-r----- 1 root root    113 Dec  4 13:57 xtrabackup_checkpoints

-rw-r----- 1 root root    537 Dec  4 13:57 xtrabackup_info

-rw-r----- 1 root root   2560 Dec  4 13:57 xtrabackup_logfile

#这里面就是相关的备份文件，同样也可以看到我们创建的库的名称


    [root@centos ~]#innobackupex --apply-log /root/2017-12-04_13-57-29/

#使用此参数使用相关数据性文件保持一致性状态


    mysql> drop table T1;

Query OK, 0 rows affected (0.01 sec)

mysql> select * from T1;

ERROR 1146 (42S02): Table 'test.T1' doesn't exist

    接下来准备恢复误删除数据

    #恢复数据之前需要保证数据目录是空的状态

    [root@centos ~]# innobackupex --defaults-file=/etc/my.cnf --copy-back /root/2017-12-04_13-57-29/

    #具体看日志截图

    [root@centos ~]# /etc/init.d/mysqld start
Starting MySQL. SUCCESS! 

[root@centos ~]# lsof -i :3306
COMMAND PID USER  FD TYPE DEVICE SIZE/OFF NODE NAME
mysqld 5935 mysql 21u  IPv6 21850  0t0  TCP *:mysql (LISTEN)

mysql> use test;
Database changed
mysql> select * from T1;
+-------+-------+
| name  | sex   |
+-------+-------+
| zhang | man   |
| zhan  | man   |
| sun   | woman |
+-------+-------+
3 rows in set (0.00 sec)

#恢复成功

    Xtrabackup增量备份与恢复

    需要注意的是，增量备份仅能应用于InooDB或XtraDB表，对于MyISAM表，增量与全备相同**

    mysql> select * from T1;
+-------+-------+
| name  | sex   |
+-------+-------+
| zhang | man   |
| zhan  | man   |
| sun   | woman |
| susun | woman |
| sige  | man   |
| mgg   | man   |
+-------+-------+
6 rows in set (0.00 sec)

    创建用于增量备份的数据，用来模拟删除掉了全备后的数据，能否通过增量备份文件来恢复

    [root@Vcentos ~]# innobackupex --defaults-file=/etc/my.cnf --user=root --password=123456 --incremental /backup/ --incremental-basedir=/root/2017-12-04_13-57-29

#--incremental /backup/   指定增量备份文件备份的目录

#--incremental-basedir    指定上一次全备或增量备份的目录


    [root@Vcentos ~]# ll /backup/2017-12-05_09-27-06/

total 312

-rw-r----- 1 root root    425 Dec  5 09:27 backup-my.cnf

-rw-r----- 1 root root    412 Dec  5 09:27 ib_buffer_pool

-rw-r----- 1 root root 262144 Dec  5 09:27 ibdata1.delta

-rw-r----- 1 root root     44 Dec  5 09:27 ibdata1.meta

drwxr-x--- 2 root root   4096 Dec  5 09:27 mysql

drwxr-x--- 2 root root   4096 Dec  5 09:27 performance_schema

drwxr-x--- 2 root root  12288 Dec  5 09:27 sys

drwxr-x--- 2 root root   4096 Dec  5 09:27 test

-rw-r----- 1 root root     21 Dec  5 09:27 xtrabackup_binlog_info

-rw-r----- 1 root root    117 Dec  5 09:27 xtrabackup_checkpoints

-rw-r----- 1 root root    560 Dec  5 09:27 xtrabackup_info

-rw-r----- 1 root root   2560 Dec  5 09:27 xtrabackup_logfile

[root@centos ~]# cd /backup/2017-12-05_09-27-06/

[root@centos 2017-12-05_09-27-06]# cat  xtrabackup_binlog_info

mysql-bin.000001  945

[root@centos 2017-12-05_09-27-06]# cat xtrabackup_checkpoints

backup_type = incremental

from_lsn = 2542843

to_lsn = 2547308

last_lsn = 2547317

compact = 0

recover_binlog_info = 0

    删除一条数据来测试增量恢复

    mysql> delete  from T1 where name='susun';

Query OK, 1 row affected (0.06 sec)

    增量恢复操作过程如下

    [root@centos ~]# innobackupex --apply-log --redo-only /root/2017-12-04_13-57-29/

[root@centos ~]# innobackupex --apply-log --redo-only /root/2017-12-04_13-57-29/ --incremental-dir=/backup/2017-12-05_09-27-06/

    恢复全部数据

    [root@centos ~]#innobackupex --defaults-file=/etc/my.cnf --copy-back /root/2017-12-04_13-57-29/

[root@centos ~]# /etc/init.d/mysqld start

Starting MySQL.. SUCCESS! 

[root@centos ~]# lsof -i :3306

COMMAND  PID  USER   FD   TYPE DEVICE SIZE/OFF NODE NAME

mysqld  23217 mysql  21u  IPv6 283226  0t0  TCP *:mysql (LISTEN)

    查看恢复的数据完整性

    感谢大家的阅读，如果本文对你有所帮助，请点赞与转发分享支持一下。

    运维mysql数据库程序员后端
    民工哥
    26.4k 声望56.7k 粉丝

    10多年IT职场老司机的经验分享，坚持自学一路从技术小白成长为互联网企业信息技术部门的负责人。2019/2020/2021年度 思否Top Writer

    « 上一篇
    2020 年 4 月全国程序员工资出炉！
    下一篇 »
    一个小工具帮你搞定实时监控Nginx服务器

    引用和评论

    推荐阅读
    头像
    早知道有这么个吊炸天的 CI&CD 工具，我就不用 Jenkins 了！

    民工哥阅读 1.7k

    头像
    疫情特殊时期，致 SegmentFault 思否全体员工的一封公开信

    波波Nadia赞 13阅读 21.1k评论 9

    头像
    在Java程序中监听mysql的binlog

    huan1993赞 11阅读 1.9k

    头像
    Spring 实现 3 种异步流式接口，干掉接口超时烦恼

    程序员小富赞 5阅读 1.7k

    头像
    Mysql数据库sql优化案例

    杜若赞 5阅读 2.1k

    头像
    ChatGPT

    注销赞 2阅读 4.3k

    头像
    高质量代码的原则

    寒青赞 4阅读 5.4k

    0 条评论
    得票最新