首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

MySQL · 物理备份 · XtraBackup备份原理

前言 Percona XtraBackup[1](简称PXB)是 Percona 公司开发的一个用于 MySQL 数据库「物理热备」的备份工具,支持 MySQl(Oracle)、Percona Server...我们 RDS MySQL物理备份就是基于这个工具做的。...项目的 blueprint 和 bug 讨论放在 Launchpad[2],代码之前也放在 Launchpad,现在已经迁移到 Github[3],项目更新发布非常快,感兴趣的可以关注 本文会介绍备份工具的工作原理...一般情况下,我们是希望能备份 MyISAM 表的,虽然我们可能自己不用 MyISAM 表,但是 mysql 库下的系统表是 MyISAM 的,因此备份基本都通过 innobackupex 命令进行;另外一个原因是我们可能需要...两个工具都在备份和解压时都会用到(如果备份用了加密和并发)。 本文的介绍的主角是 innobackupex 和 xtrabackup。

5.1K10

MySQL物理备份 xtrabackup

MySQL 备份之 xtrabackup | innobackupex Xtrabackup 介绍 Xtrabackup 是一个对 InnoDB 做数据备份的工具,支持在线热备份(备份时不影响数据读写)...) MySQL数据库本身提供的工具并不支持真正的增量备份,二进制日志恢复是point-in-time(时间点)的恢复而不是增量备份。...手册上有对各个功能都有详细的介绍。...简单介绍下,这些工具提供 了如流 (streaming)备份,增量(incremental)备份等,通过复制数据文件,复制日志文件和提交日志到数据文件(前滚)实现了各种复合备份方 式。...> use ceshi; mysql> show tables; mysql> select * from users; 单库备份与恢复操作过程 单库备份跟全库用法是一样的,只不过单库在备份里,要指定要备份的数据库名

73320
您找到你想要的搜索结果了吗?
是的
没有找到

Mysql备份与恢复(1)---物理备份

数据库及时备份可以帮助我们在数据库出现异常宕机时及时的使用备份数据进行恢复工作,将因为数据库宕机产生的影响降低到最小。所以,本篇文章主要数据库数据备份与恢复进行介绍。...由于MyISAM存储引擎中备份数据是将表保存到单独的文件所以比较简单,所以这里我主要针对InnoDB存储引擎介绍备份与恢复机制。...Mysql数据备份大致分为2类:物理备份与逻辑备份。本篇文章我们先看看物理备份物理备份 物理备份分为热备份和冷备份。...热备份 快照备份 物理备份一般还有一种方式就是热备份,热备份相比于冷备份的好处在哪呢?热备份可以在Mysql服务开启的情况下执行备份操作,只是在热备份时会添加只读这类型的限制。...热备份第一种介绍备份方式就是快照备份

2.4K41

MySQL物理备份 lvm-snapshot

MySQL备份之 lvm-snapshot lvm-snapshot(工具备份) 优点: •几乎是热备(穿件快照前把表上锁,创建完成后立即释放) •支持所有引擎 •备份速度快 •无需使用昂贵的商业软件(...2、两种备份方式   1>mylvmbackup    xxx终端备份   2>修改配置文件指定相应的参数 正常安装MySQL: 1....============================== mylvmbackup 功能:利用LVM快照实现物理备份,即LVM快照备份的自动版 安装perl模块 1..../backup #备份目录,也可以备份到行程主机 [misc] #定义备份选项 backuptype=tar #定义备份的类型 backupretention=0 prefix=backup #定义备份文件名前缀...suffix=_mysql #定义备份文件名后缀 tararg=cvf #定义tar参数,默认为cvf tarfilesuffix=.tar.gz #定义备份文件后缀名格式 datefmt=%Y%m%

1.2K20

备份策略】使用逻辑备份辅助物理备份

通常进行了物理备份还不足够,因为在很多情况下使用物理备份进行恢复会相对复杂,比如误操作TRUNCATE了数据表,这样的恢复有时候使用逻辑备份来恢复会更迅速、更有效。...所以通常将逻辑备份作为物理备份的辅助手段进行配置。...下面介绍我经常采用的一种方法(范例来自Solaris平台,其他平台可以酌情修改),供读者朋友参考。...这两个参数分别用于指定排除或包含特定类型的数据,但是文档中介绍的命令格式存在问题,这两个参数的正确用法是: ?...但是有了这些还不够,由于命令中包含了多个特殊字符,在不同操作系统下需要通过转义字符才能使以上命令顺利执行,下面通过实例来介绍一下这两个参数的使用。

2.6K110

mysql备份工具xtrabackup--介绍

mysql本身是有一个自己自身的事务日志文件,也就是redo log,也就是说当INNODB启动的时候会做两步操作,事务日志中已经提交的事物会重做,之前没有提交的事物但是已经对数据文件做了修改的就会回滚...,所以说所有文件也可能记录的并不是一个时间点的数据,这个时候XtraBackup 就会启动一个后台进程来观测mysql的事务日志,而且把事务日志中的改变记录下来。...如果存在的话就回去执行拷贝,首先被拷贝的是MYASIM表,索引还有一些其他存储引擎的文件,接下来才会拷贝INNODB表和索引,然后是事务日志文件,在复制的时候是要保留源文件的所有属性,所以说这些目录的所有者最好是给mysql...'back'@'localhost' ; grant create,insert,select on percona_schema.* to 'back'@'localhost'; 优缺点 优点: 物理备份可以绕过...MySQL Server层,加上本身就是文件系统级别的备份备份速度块,恢复速度快,可以在线备份,热备份,持续增量备份,支持并发备份,支持加密传输,支持备份限速 缺点: 要提取部分库表数据比较麻烦,不能按照基于时间点来恢复数据

55730

公有云mysql物理备份恢复自建数据库

本文介绍使用XtraBackup工具,将云mysql数据库物理备份恢复到自建数据库 PS: 为节约存储空间,云数据库 MySQL物理备份和逻辑备份文件,都会先经过 qpress 压缩,后经过...qpress-11-linux-x64.tar tar -xf qpress-11-linux-x64.tar -C /usr/local/bin/ source /etc/profile 二、下载物理备份...备注:下载地址加上单引号 三、恢复数据 1、使用xbstream命令将备份文件解包到自己数据库目录下 2、使用如下命令将.qp结尾的文件解压出来 xtrabackup --decompress...--target-dir=/data/mysql 3、执行如下命令进行apply log 操作 4、修改配置文件并配置文件属性 vim /data/mysql/backup-my.cnf 5、...启动mysql服务验证数据是否恢复 a、启动mysql服务 /usr/local/mysql/bin/mysqld_safe --defaults-file=/data/mysql/backup-my.cnf

3K50

使用CDB物理备份恢复到自建的MYSQL

背景描述 将CDB实例的物理备份恢复到自建的mysql数据库 实验环境 CDB实例:cdb-fopx6fXX 云服务器:用于恢复CDB的物理备份 如下是CDB控制台可以看到的实例中存在的数据库 image.png...1、首先建议先手动备份CDB或在控制台下载物理备份文件 【注意:CDB的默认备份方式为逻辑备份,但是如果数据量特别大,逻辑备份的恢复速度比较慢】 image.png 2、在云服务器上面创建数据库的存放目录...root 4096 Oct 30 18:18 log drwxr-xr-x 2 root root 4096 Oct 30 18:18 tmp 3、在云服务器上面通过wget下载物理备份文件 [root...记录二进制日志和偏移量,若开启gtid,还会记录gtid位置,为在线搭建从库做准备 xtrabackup_info 记录备份详细信息,如备份命令、开始结束时间、版本等 6、将数据库的物理备份文件移动到步骤...重新进行登录 image.png 至此通过CDB物理备份恢复数据库全部完成;

2K30

技术分享 | 如何缩短 MySQL 物理备份恢复时间?

1背景 作为一名 DBA,数据库的备份与恢复是异常重要的,日常我们也许关注的仅仅是提升备份效率,但在真实的运维场景下,数据恢复的时间成本考量更为重要,过长的恢复时间可能满足不了 RTO 的要求。...前置条件:你已经拥有了完整的 Xtrabackup 全量备份和 Binlog。...MySQL 8.0 之前,可以解析备份中的 .frm 文件获取表结构,如 mysqlfrm 工具。MySQL 8.0 之后,ibd2sdi 工具配合一些第三方脚本可助你一臂之力。...prepare 阶段是需要一定时间的,我们可以在备份完成后直接做 prepare,从而省掉大量时间。同样,用于恢复的临时机器如何快速拿到备份文件也是优化的方向之一。 机器性能因素。...如 CPU、磁盘性能、网络带宽(传输备份相关文件)等。 本文关键字:#MySQL# #备份# #Xtrabackup#

25711

InnoDB的物理备份方法

利用二进制文件的复制操作,可以对InnoDB进行完整的物理备份备份对全部的InnoDB表进行复制,并生成所有表空间文件的副本。...为了保证一致性,进行文件复制时,必须停掉MySQL服务器,因此,该方法是冷备份的方法。 二进制文件的物理备份具有可移植性。...二进制文件可以从一台MySQL服务器直接复制到另外一台服务器,在不同架构的服务器间进行备份时非常有用。对于不同的存储引擎,可移植性稍微不同。...InnoDB的二进制文件物理备份过程 关闭MySQL服务器(慢关机) 要求“innodb_fast_shutdown=0”,默认值是1。 在关机前允许InnoDB完成额外的刷新操作。...包括: 数据文件:“ibdata”和“*.ibd” 重做日志:“ib_logfile*” 撤销日志:“undo_*” 全部的配置文件,例如,“my.cnf” 重新启动服务器 备份恢复 使用物理备份恢复InnoDB

11710

MySQL 云数据库物理备份本地恢复方案

在国内不论是使用阿里云、腾讯云还是华为云的云平台版本的 MySQL 数据库,在遇到数据备份恢复的场景,都会遇到需要使用 Percona XtraBackup 工具进行备份还原的需求。...阿里云:《RDS MySQL物理备份文件恢复到自建数据库》 腾讯云: 《云数据库 MySQL - 使用物理备份恢复数据库》 华为云:《通过备份文件恢复到自建数据库(MySQL)》 本文将基于容器工具的方式进行数据恢复处理.../restore:/var/lib/mysql-files:rw 上面的配置中,我声明了两个目录用于保存数据,首先是用于放置云数据库备份的 restore 目录,其次是用于暂存还原后的数据库文件的 data...数据“解压缩” 在准备好数据备份文件之后,我们进入容器进行后续操作: docker exec -it percona bash 进入容器之后,先切换工作目录: cd /var/lib/mysql-files...innobackupex --defaults-file=/etc/mysql/node.cnf --apply-log /var/lib/mysql-files/ 数据恢复时间,根据你的备份文件大小而定

5K20

MySQL 云数据库物理备份本地恢复方案

在国内不论是使用阿里云、腾讯云还是华为云的云平台版本的 MySQL 数据库,在遇到数据备份恢复的场景,都会遇到需要使用 Percona XtraBackup 工具进行备份还原的需求。...阿里云:《RDS MySQL物理备份文件恢复到自建数据库》 腾讯云:《云数据库 MySQL - 使用物理备份恢复数据库》 华为云:《通过备份文件恢复到自建数据库(MySQL)》 本文将基于容器工具的方式进行数据恢复处理.../restore:/var/lib/mysql-files:rw 上面的配置中,我声明了两个目录用于保存数据,首先是用于放置云数据库备份的 restore 目录,其次是用于暂存还原后的数据库文件的 data...innobackupex --defaults-file=/etc/mysql/node.cnf --apply-log /var/lib/mysql-files/ 数据恢复时间,根据你的备份文件大小而定...: mysqldump -u xtrabackup YOUR_DATABASE > backup.sql 因为我们导出的是标准的数据库备份,所以继续进行迁移也很简单,可以使用诸如: mysql -u

3.5K20

MySQL中,如何进行备份和恢复数据库?物理备份和逻辑备份的区别是什么?

【请关注一凡sir,更多技术内容可以来我的个人网站】 一、物理备份 物理备份是将数据库的二进制文件直接拷贝到另一个位置,以达到备份数据库的目的。...启动MySQL服务。 物理备份的优点是备份速度快,恢复速度也较快。但缺点是备份文件较大,不易跨平台,且只能在相同架构的MySQL服务器上恢复。...:mysql -u username -p database_name < backup_file.sql 使用MySQL Workbench等图形界面工具进行备份和恢复。...逻辑备份的优点是备份文件较小,易于跨平台,且备份文件可以进行修改或筛选数据。缺点是备份和恢复速度较慢。 结论 物理备份和逻辑备份的主要区别在于备份文件的形式和备份恢复的灵活性。...物理备份直接复制数据库的二进制文件,备份文件较大,恢复时只能在相同架构的MySQL服务器上使用;逻辑备份将数据库导出为SQL语句的形式,备份文件较小,恢复时可跨平台使用,也可以进行数据的修改和筛选。

58781

MySQL通过物理备份恢复后,配置主从复制报错案例

最经在通过物理备份恢复MySQL实例后,和原来的主库之间配置主从复制关系;但是在配置过程中遇到1236报错的问题,下面我们来看下具体的情况; 场景描述 通过物理备份文件(从库的全量备份)恢复实例后...恢复物理备份后,首先进行applylog操作 innobackupex --apply-log /data/mysql_4306/data/ 查看物理备份文件中记录备份时候的GTID相关信息 cat data...17136423-a6e9-11e9-9b46-005056b7f430:1-14744282:14744284-52079172,7bd27dfa-a6e9-11e9-92df-005056b7552b:1-2 物理备份恢复后...MASTER_PORT=4306, MASTER_AUTO_POSITION = 1; start slave;show slave status\G 配置好复制后,启动复制,复制出现如下的报错信息: mysql...row in set (0.00 sec) 从报错信息看,是由于从库在执行主库传输过来的binlog event的时候,发现主库的binlog已经被purge掉了 首先,查看主库的gtid相关信息 mysql

70520
领券