Percona Xtrabackup快速备份MySQL

本文涉及的产品
云数据库 RDS MySQL Serverless,0.5-2RCU 50GB
简介:

   老规矩,开场白,刚开始用mysqldump,备份100G+的数据库,再加上服务器繁忙,备份速度像蜗牛似的,于是寻找更高效的备份方法。网上都说用xtrabackup比较适合备份大的数据库,而且备份效率也高,就尝试使用一次,结果明显感觉比mysqldump备份与恢复速度就是快不少,那以后就用它了。大礼拜日的在家也没事,结合生产环境,写了这篇文档,刚接触的朋友,可以参考下,不多说,入正题!

1、初次备份前准备工作

   1.1 了解备份方式

       热备份:读写不受影响(mysqldump-->innodb)

       温备份:仅可以执行读操作(mysqldump-->myisam)

       冷备份:离线备份,读写都不可用

       逻辑备份:将数据导出文本文件中(mysqldump)

       物理备份:将数据文件拷贝(xtrabackup、mysqlhotcopy

       完整备份:备份所有数据

       增量备份:仅备份上次完整备份或增量备份以来变化的数据

       差异备份:仅备份上次完整备份以来变化的数据

   1.2 创建备份用户

1
2
      mysql> grant reload,lock tables,replication client on *.* to  'bak' @ 'localhost'  identified by  'bak2015' ;
      mysql> flush privileges;

   1.3 安装方式

     CentOS:

       # rpm -ivh http://www.percona.com/downloads/percona-release/redhat/0.1-3/percona-release-0.1-3.noarch.rpm

       # yum install percona-xtrabackup  #xtrabackup2.2不支持MySQL5.1的Innodb引擎,如需要可安装2.0版本https://www.percona.com/downloads/XtraBackup/XtraBackup-2.0.8/RPM/rhel6/x86_64/percona-xtrabackup-20-2.0.8-587.rhel6.x86_64.rpm)

     Ubuntu:

       # sudo apt-get install xtrabackup  #14.04默认有这个包,14.04之前版本如果没有再这个地址下载对应的版本:https://www.percona.com/downloads/XtraBackup/

   1.4 了解常用参数

       --user=     #指定数据库备份用户

       --password=  #指定数据库备份用户密码

       --port=     #指定数据库端口

       --host=     #指定备份主机

       --socket=    #指定socket文件路径

       --databases=  #备份指定数据库,多个空格隔开,如--databases="dbname1 dbname2",不加备份所有库

       --defaults-file=       #指定my.cnf配置文件

       --apply-log         #日志回滚

       --incremental=          #增量备份,后跟增量备份路径

       --incremental-basedir=     #增量备份,指上次增量备份路径

       --redo-only         #合并全备和增量备份数据文件

       --copy-back         #将备份数据复制到数据库,数据库目录要为空

       --no-timestamp          #生成备份文件不以时间戳为目录名

       --stream=             #指定流的格式做备份,--stream=tar,将备份文件归档

      --remote-host=user@ip DST_DIR #备份到远程主机

2、完整备份与恢复

   2.1 完整备份

      # innobackupex --user=bak --password='bak2015' /mysql_backup   

   2.2 备份恢复

      # innobackupex --defaults-file=/etc/mysql/my.cnf --copy-back /home/loongtao/mysql_backup/2015-02-08_11-56-48/

   2.3 备份文件说明

      # ls 2015-02-08_11-56-48

      backup-my.cnf:记录innobackup使用到mysql参数

      xtrabackup_binary:备份中用到的可执行文件

    xtrabackup_checkpoints:记录备份的类型、开始和结束的日志序列号

      xtrabackup_logfile:备份中会开启一个log copy线程,用来监控innodb日志文件(ib_logfile),如果修改就会复制到这个文件

3、完整备份+增量备份与恢复

   3.1 完整备份

      # innobackupex --user=bak --password='bak2015' /mysql_backup

      #备份后位置是:/mysql_backup/2015-02-08_11-56-48

   3.2 增量备份1

      # innobackupex --user=bak --password='bak2015' --incremental /data1/mysql_backup --incremental-basedir=/mysql_backup/2015-02-08_11-56-48  #指定上次完整备份目录

   3.3 增量备份2

      # innobackupex --user=bak --password='bak2015' --incremental /data1/mysql_backup --incremental-basedir=/mysql_backup/2015-02-08_12-16-06  #指定上次增量备份目录

   3.4 查看xtrabackup_checkpoints文件,一目了然,可以看到根据日志序号来增量备份

wKioL1TXGvCSc7KkAALo5ttBsM8636.jpg

   3.5 备份恢复

      3.5.1 备份恢复思路

        将增量备份1、增量备份2...合并到完整备份,加到一起出来一个新的完整备份,将新的完整备份以拷贝的形式到数据库空目录(rm /var/lib/mysql/* -rf)

      3.5.2 预备完整备份

      #xtrabackup把备份过程中可能有尚未提交的事务或已经提交但未同步数据文件的事务,写到xtrabackup_logfile文件,所以要先通过这个日志文件回滚,把未完成的事务同步到备份文件,保证数据文件处于一致性。

        # innobackup --apply-log --redo-only 2015-02-08_11-56-48

      3.5.3 合并第一个增量备份

        # innobackupex --apply-log --redo-only /mysql_backup/2015-02-08_11-56-48/ --incremental-dir=mysql_backup/2015-02-08_12-16-06

      3.5.4 合并第二个增量备份

        # innobackupex --apply-log --redo-only /mysql_backup/2015-02-08_11-56-48/ --incremental-dir=mysql_backup/2015-02-08_16-06-53

      3.5.5 恢复完整备份(这时2015-02-08_11-56-48完整备份已经包含所有增量备份,可以通过查看checkpoints来核实

        # innobackupex --defaults-file=/etc/mysql/my.cnf --copy-back /mysql_backup/2015-02-08_11-56-48/

      3.5.6 修改恢复数据文件权限

        # chown -R mysql.mysql /var/lib/mysql

      3.5.7 启动MySQL,查看数据库恢复情况

        # /etc/init.d/mysqld start

4、备份文件归档压缩

   4.1 归档并发送到备份服务器

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup 2>/mysql_backup/bak.log |ssh root@192.168.18.251 "cat - > /mysql_backup/`date +%F`.tar"

      解压:tar -ixvf `date +%F`.tar

   4.2 归档备份

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup > /mysql_backup/`date +%F`.tar

      解压:tar -ixvf `date +%F`.tar

   4.3 压缩归档备份

      # innobackupex --databases=test --user=bak --password='bak2015' --stream=tar /mysql_backup |gzip >/mysql_backup/`date +%F`.tar.gz

      解压:tar -izxvf `date +%F`.tar.gz


相关实践学习
基于CentOS快速搭建LAMP环境
本教程介绍如何搭建LAMP环境,其中LAMP分别代表Linux、Apache、MySQL和PHP。
全面了解阿里云能为你做什么
阿里云在全球各地部署高效节能的绿色数据中心,利用清洁计算为万物互联的新世界提供源源不断的能源动力,目前开服的区域包括中国(华北、华东、华南、香港)、新加坡、美国(美东、美西)、欧洲、中东、澳大利亚、日本。目前阿里云的产品涵盖弹性计算、数据库、存储与CDN、分析与搜索、云通信、网络、管理与监控、应用服务、互联网中间件、移动服务、视频服务等。通过本课程,来了解阿里云能够为你的业务带来哪些帮助     相关的阿里云产品:云服务器ECS 云服务器 ECS(Elastic Compute Service)是一种弹性可伸缩的计算服务,助您降低 IT 成本,提升运维效率,使您更专注于核心业务创新。产品详情: https://www.aliyun.com/product/ecs
目录
相关文章
|
4月前
|
关系型数据库 MySQL AndFix
MySQL 8.0是MySQL
MySQL 8.0是MySQL发展的一个重要里程碑。在这个版本中,MySQL Server层的整体架构得到了质的飞跃,通过持续每三个月的迭代和重构工作,使得MySQL在性能和功能上都有了显著的提升。本文将基于MySQL 8.0.25源码,详细介绍MySQL 8.0的最新架构和一些重要的变化。
52 1
|
5月前
|
关系型数据库 MySQL Linux
mysql 如何 才是真正的mysql
mysql 如何 才是真正的mysql
30 0
|
存储 SQL JSON
mysql8.0 与mysql 5.7 对比
mysql8.0 与mysql 5.7 对比
602 0
|
SQL 关系型数据库 MySQL
【必知必会的MySQL知识】②使用MySQL
【必知必会的MySQL知识】②使用MySQL
90 0
【必知必会的MySQL知识】②使用MySQL
|
SQL 关系型数据库 MySQL
MySQL5.7及以上 转 MySQL5.5
MySQL5.7及以上 转 MySQL5.5
119 0
|
存储 SQL Oracle
Mysql的前世今生,Hello,Mysql
1.什么是数据库? 数据库(Database)是按照数据结构来组织、存储和管理数据的仓库。 每个数据库都有一个或多个不同的 API 用于创建,访问,管理,搜索和复制所保存的数据。 我们也可以将数据存储在文件中,但是在文件中读写数据速度相对较慢。
98 0
Mysql的前世今生,Hello,Mysql
|
SQL Oracle 关系型数据库
3_MySQL
3_MySQL
91 0
|
存储 SQL 自然语言处理
【MySQL】MySQL知识总结
【MySQL】MySQL知识总结
【MySQL】MySQL知识总结
|
存储 SQL 安全
MySQL 是什么
MySQL 是什么
282 0