Percona Xtrabackup快速备份MySQL

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

   老规矩,开场白,刚开始用mysqldump,备份100G+的数据库,再加上服务器繁忙,备份速度像蜗牛似的,于是寻找更高效的备份方法。网上都说用xtrabackup比较适合备份大的数据库,而且备份效率也高,就尝试使用一次,结果明显感觉比mysqldump备份与恢复速度就是快不少,那以后就用它了。大礼拜日的在家也没事,结合生产环境,写了这篇文档,刚接触的朋友,可以参考下,不多说,入正题!

1、初次备份前准备工作

   1.1 了解备份方式

       热备份:读写不受影响(mysqldump-->innodb)

       温备份:仅可以执行读操作(mysqldump-->myisam)

       冷备份:离线备份,读写都不可用

       逻辑备份:将数据导出文本文件中(mysqldump)

       物理备份:将数据文件拷贝(xtrabackup、mysqlhotcopy

       完整备份:备份所有数据

       增量备份:仅备份上次完整备份或增量备份以来变化的数据

       差异备份:仅备份上次完整备份以来变化的数据

   1.2 创建备份用户

1
2
      mysql> grant reload,lock tables,replication client on *.* to  'bak' @ 'localhost'  identified by  'bak2015' ;
      mysql> flush privileges;

   1.3 安装方式

     CentOS:

       # rpm -ivh http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

       # yum install percona-xtrabackup  #xtrabackup2.2不支持MySQL5.1的Innodb引擎,如需要可安装2.0版本https://www.percona.com/downloads/XtraBackup/XtraBackup-2.0.8/RPM/rhel6/x86_64/percona-xtrabackup-20-2.0.8-587.rhel6.x86_64.rpm)

     Ubuntu:

       # sudo apt-get install xtrabackup  #14.04默认有这个包,14.04之前版本如果没有再这个地址下载对应的版本:https://www.percona.com/downloads/XtraBackup/

   1.4 了解常用参数

       --user=     #指定数据库备份用户

       --password=  #指定数据库备份用户密码

       --port=     #指定数据库端口

       --host=     #指定备份主机

       --socket=    #指定socket文件路径

       --databases=  #备份指定数据库,多个空格隔开,如--databases="dbname1 dbname2",不加备份所有库

       --defaults-file=       #指定my.cnf配置文件

       --apply-log         #日志回滚

       --incremental=          #增量备份,后跟增量备份路径

       --incremental-basedir=     #增量备份,指上次增量备份路径

       --redo-only         #合并全备和增量备份数据文件

       --copy-back         #将备份数据复制到数据库,数据库目录要为空

       --no-timestamp          #生成备份文件不以时间戳为目录名

       --stream=             #指定流的格式做备份,--stream=tar,将备份文件归档

      --remote-host=user@ip DST_DIR #备份到远程主机

2、完整备份与恢复

   2.1 完整备份

      # innobackupex --user=bak --password='bak2015' /mysql_backup   

   2.2 备份恢复

      # innobackupex --defaults-file=/etc/mysql/my.cnf --copy-back /home/loongtao/mysql_backup/2015-02-08_11-56-48/

   2.3 备份文件说明

      # ls 2015-02-08_11-56-48

      backup-my.cnf:记录innobackup使用到mysql参数

      xtrabackup_binary:备份中用到的可执行文件

    xtrabackup_checkpoints:记录备份的类型、开始和结束的日志序列号

      xtrabackup_logfile:备份中会开启一个log copy线程,用来监控innodb日志文件(ib_logfile),如果修改就会复制到这个文件

3、完整备份+增量备份与恢复

   3.1 完整备份

      # innobackupex --user=bak --password='bak2015' /mysql_backup

      #备份后位置是:/mysql_backup/2015-02-08_11-56-48

   3.2 增量备份1

      # innobackupex --user=bak --password='bak2015' --incremental /data1/mysql_backup --incremental-basedir=/mysql_backup/2015-02-08_11-56-48  #指定上次完整备份目录

   3.3 增量备份2

      # innobackupex --user=bak --password='bak2015' --incremental /data1/mysql_backup --incremental-basedir=/mysql_backup/2015-02-08_12-16-06  #指定上次增量备份目录

   3.4 查看xtrabackup_checkpoints文件,一目了然,可以看到根据日志序号来增量备份

wKioL1TXGvCSc7KkAALo5ttBsM8636.jpg

   3.5 备份恢复

      3.5.1 备份恢复思路

        将增量备份1、增量备份2...合并到完整备份,加到一起出来一个新的完整备份,将新的完整备份以拷贝的形式到数据库空目录(rm /var/lib/mysql/* -rf)

      3.5.2 预备完整备份

      #xtrabackup把备份过程中可能有尚未提交的事务或已经提交但未同步数据文件的事务,写到xtrabackup_logfile文件,所以要先通过这个日志文件回滚,把未完成的事务同步到备份文件,保证数据文件处于一致性。

        # innobackup --apply-log --redo-only 2015-02-08_11-56-48

      3.5.3 合并第一个增量备份

        # innobackupex --apply-log --redo-only /mysql_backup/2015-02-08_11-56-48/ --incremental-dir=mysql_backup/2015-02-08_12-16-06

      3.5.4 合并第二个增量备份

        # innobackupex --apply-log --redo-only /mysql_backup/2015-02-08_11-56-48/ --incremental-dir=mysql_backup/2015-02-08_16-06-53

      3.5.5 恢复完整备份(这时2015-02-08_11-56-48完整备份已经包含所有增量备份,可以通过查看checkpoints来核实

        # innobackupex --defaults-file=/etc/mysql/my.cnf --copy-back /mysql_backup/2015-02-08_11-56-48/

      3.5.6 修改恢复数据文件权限

        # chown -R mysql.mysql /var/lib/mysql

      3.5.7 启动MySQL,查看数据库恢复情况

        # /etc/init.d/mysqld start

4、备份文件归档压缩

   4.1 归档并发送到备份服务器

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup 2>/mysql_backup/bak.log |ssh root@192.168.18.251 "cat - > /mysql_backup/`date +%F`.tar"

      解压:tar -ixvf `date +%F`.tar

   4.2 归档备份

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup > /mysql_backup/`date +%F`.tar

      解压:tar -ixvf `date +%F`.tar

   4.3 压缩归档备份

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup |gzip >/mysql_backup/`date +%F`.tar.gz

      解压:tar -izxvf `date +%F`.tar.gz


相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
9月前
|
关系型数据库 MySQL 数据库
MySQL-使用Percona进行备份与恢复
MySQL 使用Percona进行备份与恢复
125 0
|
4月前
|
关系型数据库 MySQL 数据库
xtrabackup 备份还原mysql
通过使用xtrabackup 备份还原mysql数据库
45 3
|
存储 JSON 关系型数据库
MySQL8.0 Xtrabackup备份问题
MySQL 8.0已经成为最受瞩目的版本,增加了许多新特性,如Clone Plugin、Hash Join等等。由于新的MySQL重做日志和数据字典格式,所以推出新的XtraBackup 8.0版本,本文基于MySQL产品在自动搭建备库时遇到问题做出解析。
797 0
MySQL8.0 Xtrabackup备份问题
|
关系型数据库 MySQL Linux
xtrabackup热备mysql
xtrabackup备份mysql,增量备份恢复和还原。
1971 0
|
关系型数据库 MySQL 数据库
MySQL-Xtrabackup备份还原
前言 通常我们都是使用xtrabackup工具来备份数据库,它是一个专业的备份工具,先来简单介绍下它。 Xtrabackup percona提供的mysql数据库备份工具,惟一开源的能够对innodb和xtradb数据库,它的增量备份不是基于二进制日志文件来还原数据的,是基于mysql数据块。
1772 0
|
SQL 监控 关系型数据库
Mysql 备份恢复与xtrabackup备份
新年贺词   2017年即将过去,新年的钟声即将敲响。在这辞旧迎新的美好时刻,我向全国各族人民,向香港特别行政区同胞、澳门特别行政区同胞,向台湾同胞和海外侨胞,向工作在一线的运维工程师们,向为开源事业做出贡献的朋友们,向世界各国各地区的朋友们,致以新年的祝福!   今天是2017的最后一天,在这样一个特殊的日子里,希望大家都能事事顺心,快乐常在,希望在2018年里都能有所成就,创造不一样的价值。
2787 0
|
关系型数据库 MySQL 数据库
|
存储 关系型数据库 MySQL