首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

MySQL实时增量备份

备份过程中,数据插入和更新操作都会被挂起   mysqldump不足     效率较低,备份和还原速度慢     备份过程中,数据插入和更新操作会被挂起   XtraBackup工具     ...在线热备份工具     备份过程中不锁表,适合生产环境适用     支持整体备份增量备份     组件一xtrabackup:C程序,支持InnoDB和XtraDB     组件二innobackupex...--incremental-basedir=/backup/mysql/ 确认备份好的文件数据: [root@localhost~]# ls /backup/inc01/ 对比完整备份增量备份的大小:...mysql/用来重建MySQL服务器,但这种情况下需提前合并相关增量备份的数据: 先准备完整备份目录,添加--apply-log-only仅应用日志: [root@loclahost ~]# xtrabackup..._56 --prepare --target-dir=/backup/mysql --apply-log-only 然后整合增量备份的数据,通过--incremental-dir选项指定增量位置: [

2.7K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    mysql备份策略的实现(全量备份+增量备份)

    设计场景 1)增量备份在周一到周六凌晨3点,复制mysql-bin.00000*到指定目录; 2)全量备份则使用mysqldump将整个数据库导出,每周日凌晨3点执行,并会删除上周留下的mysq-bin....00000*,然后对mysql备份操作会保留在bak.log文件中。...#增量日志文件目录 (2)修改所属的用户/组:(不修改,mysql无法重启) #chown -R mysql.mysql mysql-bin (3)修改mysql配置文件,执行: #vim /etc/my.cnf...backup目录,新建daily目录:mkdir backup 切换到/home/mysql目录,执行: #vim Mysql-FullyBak.sh 编写增量备份脚本 切换到/home/mysql目录...0 3 * * 0 /bin/bash -x /home/mysql/Mysql-FullyBak.sh >/dev/null 2>&1#周一到周六凌晨3:00做增量备份0 3 * * 1-6 /bin

    3.7K30

    浅谈使用Binlog实现MySQL增量备份

    在写文章的时候,我一直在纠结,这个到底能不能算增量备份,因为使用binlog的这种方式,按照官方文档的说话,应该叫做 point-in-time ,而非正经的增量模式,但是也聊胜于无。...首先我先阐述一下,他的基本原理,就是定时制作基线,然后定时更新binlog,形成增量数据文件,然后在必要的时候进行恢复,追溯。...那么我们又该如何选择备份方案呢?...参数 --flush-logs,结束当前日志,生成并使用新日志文件 参数 --master-data=2,该选项将会在输出SQL中记录下完全备份后新日志文件的名称,用于日后恢复时参考,例如输出的备份SQL...产生新的binlog日志来记录备份之后的数据库“增删改”操作。

    1.7K30

    利用Xtrabackup进行mysql增量备份和全量备份

    利用Xtrabackup进行mysql增量备份 现在xtrabackup版本升级到了8.0,但是只对mysql8.0才有支持, 我们这还是使用2.4, 但是2.4相比之前的2.1有了比较大的变化:innobackupex...在这种情况下,您可以看到to_lsn (最后一个检查点LSN)和last_lsn(最后一个复制的LSN)之间存在差异,这意味着在备份过程中服务器上有一些流量。...提问总结 增量备份步骤 创建基础备份 一定条件进行增量备份创建 对所有备份进行准备 所有增量基于基础备份 相当于合并操作 最后和全量备份一样 直接恢复即可 原理 在InnoDB内部会维护一个redo日志文件...上面就是 xtrabackup 的备份过程。...mysqldump 备份缺点 效率较低,备份和还原速度慢,份过程中,数据插入和更新操作会被挂起 MySQL 备份工具 跨平台性差,备份时间长,冗余备份,浪费存储空间 XtraBackup 备份过程中不锁库表

    1.4K20

    Mysql备份系列(3)--innobackupex备份mysql大数据(全量+增量)操作记录

    (本机硬盘空间不足时很有用) MySQL数据库本身提供的工具并不支持真正的增量备份,二进制日志恢复是point-in-time(时间点)的恢复而不是增量备份。...当所有上述文件备份完成后,innobackupex脚本将会恢复xtrabackup的执行,等待其备份上述逻辑执行过程中生成的事务日志文件。.../backup/mysql/data            备份存放的目录 2>/backup/mysql/data/bak.log       备份日志,将备份过程中的输出信息重定向到bak.log...增量备份需要基于全量备份 先假设我们已经有了一个全量备份(如上面的/backup/mysql/data/2016-12-01_00-07-15),我们需要在该全量备份的基础上做第一次增量备份。...这里要注意的是: 1)最后一步的增量备份并没有--redo-only选项!回滚进行崩溃恢复过程 2)可以使用--use_memory提高性能。

    2.1K101

    使用XtraBackup备份MySQL 8.0 Part 7 对增量备份进行恢复

    MySQL 8.0.19 Redhat 7.4 操作系统账号:mysql 数据库备份账号:backup 1. prepare阶段 上节我们介绍了如何使用xtrabackup对数据库进行增量备份,分别为base...,incr1以及incr2 结束后我们得到了非一致性的备份文件,即需要对未提交的事务进行回滚以及对提交的事务进行前滚 这个过程在xtrabackup中叫做准备阶段(prepare stage) 这个阶段完成后该备份文件就可被使用...你可以在任何机器上prepare 2. prepare 备份 通过上一节内容我们有如下备份内容 第一次全备第一次增量备份第二次增量备份我们同样使用--apply-log进行恢复动作,相当于Oracle...的recover动作 我们需要依次进行prepare,即按照如下步骤进行 prepare第一次全备prepare第一次增量备份prepare第二次增量备份还有需要注意的是和prepare全备不一样,除了最后一步...=/data/mysql/backup/base --incremental-dir=/data/backups/inc1 这时已经将第一次增量备份的内容附加到了全备的数据文件上了 这时数据文件处于非一致状态

    1.7K30

    Mysql备份系列(2)--mysqldump备份(全量+增量)方案操作记录

    线上数据库备份场景: 每周日执行一次全量备份,然后每天下午1点执行MySQLdump增量备份....下面对这种备份方案详细说明下: 1.MySQLdump增量备份配置 执行增量备份的前提条件是MySQL打开binlog日志功能,在my.cnf中加入 log-bin=/opt/Data/MySQL-bin...2.恢复增量备份 mysqlbinlog MySQL-bin.000002 … | MySQL -u root -p注意此次恢复过程亦会写入日志文件,如果数据量很大,建议先关闭日志功能 --compatible...--routines,-R 导出存储过程以及自定义函数。...------------------------- 下面分享一下自己用过的mysqldump全量和增量备份脚本 应用场景: 1)增量备份在周一到周六凌晨3点,会复制mysql-bin.00000*到指定目录

    4.4K91

    完全备份、差异备份增量备份的区别

    备份过程中,任何现有的标记都被清除,每个文件都被标记为已备份。换言之,清除存档属性。 完全备份就是指对某一个时间点上的所有数据或应用进行的一个完全拷贝。...差异备份(Differential Backup) 备份自上一次完全备份之后有变化的数据。差异备份过程中,只备份有标记的那些选中的文件和文件夹。它不清除标记,也即备份后不标记为已备份文件。...增量备份过程中,只备份有标记的选中的文件和文件夹,它清除标记, 既:备份后标记文件,换言之,清除存档属性。...增量备份是指在一次全备份或上一次增量备份后,以后每次的备份只需备份与前一次相比增加和者被修改的文件。...这就意味着,第一次增量备份的对象是进行全备份后所产生的增加和修改的文件;第二次增量备份的对象是进行第一次增量备份后所产生的增加和修改的文件,如此类推。

    3.4K20

    全量备份增量备份差异备份说明

    二、备份种类介绍 1)全量备份 备份全部选中的文件夹,并不依赖文件的存档属性来确定备份那些文件。(在备份过程中,任何现有的标记都被清除,每个文件都被标记为已备份,换言之,清除存档属性)。...2)增量备份 增量备份是针对于上一次备份(无论是哪种备份):备份上一次备份后(包含全量备份、差异备份增量备份),所有发生变化的文件。...(增量备份过程中,只备份有标记的选中的文件和文件夹,它清除标记,既:备份后标记文件,换言之,清除存档属性)。...3)差异备份 差异备份是针对完全备份备份上一次的完全备份后发生变化的所有文件。(差异备份过程中,只备份有标记的那些选中的文件和文件夹。...还原数据的步骤是这样的:先还原周一的完全备份,然后依次还原周二至周四的增量备份。总共 4 次还原过程

    4.1K70

    Mysql备份系列(4)--lvm-snapshot备份mysql数据(全量+增量)操作记录

    前面分别介绍了: Mysql备份系列(1)--备份方案总结性梳理 Mysql备份系列(2)--mysqldump备份(全量+增量)方案操作记录 Mysql备份系列(3)--innobackupex备份mysql...mysql> SET GLOBAL sync_binlog=1; 查看二进制日志和position,以备后续进行binlog日志恢复增量数据(记住这个position节点记录,对后面的增量数据备份很重要...5)重启数据 先将最新一次的binlog日志备份到别处,用作增量数据备份。...2)后续只需要每天备份一次最新的binlog日志(备份后立即flush logs产生新的binlog日志),这相当于增量备份了。...3)利用快照备份恢复全量数据,利用备份的binlog日志进行增量数据恢复 4)crontab计划任务,每天定时备份最近一次的binlog日志即可。

    2.1K91

    使用Xtrabackup实现MySQL数据库的增量备份

    接上一篇文章使用Xtrabackup备份MySQL数据库,下面介绍使用Xtrabackup实现MySQL数据库的增量备份 先在users表中插入10条记录,全库做一次全量备份 [root@localhost...@2019 --socket=/tmp/mysql.sock /backup 接下面我们再在表中插入几条新数据 要实现第一次增量备份,可以使用下面的命令进行: # innobackupex --incremental...-12-17/ 下面我们删除几条数据,然后通过之前的增量备份进行还原 “准备”(prepare)增量备份与整理完全备份有着一些不同,尤其要注意的是: (1)需要在每个备份(包括完全和各个增量备份)上,...,而INCREMENTAL-DIR-1指的是第一次增量备份的目录,INCREMENTAL-DIR-2指的是第二次增量备份的目录,其它依次类推,即如果有多次增量备份,每一次都要执行如上操作 下面模拟只有一次增量备份增量备份还原过程...-R mysql:mysql /usr/local/mysql/data/ service mysqld start 登录数据库验证是否恢复成功 可以看出增量备份恢复成功 当然有时也可以通过mysqlbinlog

    1.6K20

    innobackupex备份恢复+增量备份与恢复

    /data/backup/ 92M /data/backup/ 3.2 创建增量备份 再开始之前,我们先模拟增加一个库,这个就是我们所谓的增加的数据!... protected]03 ~]# mysql -uroot -pzhangduanya db123 < /tmp/mysqlbak.sql //把之前备份的数据恢复得到db123库 第一次增量备份...16M; 3.3 模拟执行第二次增量备份 [[email protected] backup]# mysql -uroot -pzhangduanya -e "create database lalala...2017-08-24_23-10-21 17M 2017-08-24_23-41-33 ----------------------------- 这里有个注意点,也是困扰很多人的一个关键操作,我们再次做增量备份的时候要基于刚刚已经做了的基础上面再次增量...也即是说这样这次的增量里面才会有刚刚咱们添加的db123库的信息。 ---- 四、增量备份的恢复 4.1 为了还原真实性,我模拟删除数据库,并且停掉mysql,利用咱们已经备份的数据去恢复它。

    12.1K100
    领券