MYSQL数据闪回方式

MYSQL官方截止目前还没有出来数据闪回特性,也许后续版本会出现。社区有一些开源工具可以使用,沿用的基本都是彭立勋最早提出的思路,利用binlog对SQL进行反向解析,从而实现数据闪回,例如不带where条件的update操作,导致全表数据被误更新。

闪回前提:

binlog_format = ROW

操作模拟:

没加where条件,导致全表更新;或者没加host列,导致多余行被更新。

我只想把user=test_user1,host=1.1.1.1改密码,但是没加host条件。此时并没有及时发现,直到报错才意识到操作失误。如果直到之前的密码那也还好,如果不知道就需要做数据恢复了。

闪回方式:

一、利用mysql自带的mysqlbinlog命令解析binlog,再通过grep、sed等命令把binlog中相关SQL误操作给逆向回来,然后导入SQL文件来恢复错误操作。

  1. 根据当时操作时间解析binlog
mysqlbinlog -v --base64-output=decode-rows mysql-bin.000011 --start-datetime="2017-11-27 11:40:00" --stop-datetime="2017-11-27 12:00:00" | egrep -A4 -i  'UPDATE `mysql`.`user`|### SET' > rollback.sql
  1. 将解析出来的日志再进行处理,将where和set数据反转后再导入恢复
  2. 这种方式比较麻烦,需要自己写一套转换脚本

二、利用彭立勋提供的工具mysqlbinlog,只支持5.5版本,随后社区提供了支持5.6以上版本工具

5.5版本:https://pan.baidu.com/s/1qXB8Zxy

5.6以上版本:https://pan.baidu.com/s/1dFtUNlf

  1. 下载对应版本的工具 绝对路径:/mysqlbinlog -v -B mysql-bin.000011 --base64-output=decode-rows --start-datetime="2017-11-27 11:40:00" --stop-datetime="2017-11-27 12:00:00" > rollback.sql
  2. 此工具自动将where和set数据反转
  3. 将注释去掉直接恢复即可

三、mysqlbinlog2sql、mysqlbinlog_flashback(类似二)

下载:git clone https://github.com/danfengcao/binlog2sql.git && cd binlog2sql

pip install -r requirements.txt

  1. python binlog2sql.py -uroot -h127.0.0.1 -p -dmysql --start-file='mysql-bin.000011' -B --start-datetime='2017-11-27 11:40:00' --stop-datetime="2017-11-27 12:00:00" > rollback.sql
  2. 此工具自动将where和set数据反转

四、脚本binlog_rollback.py

下载:https://pan.baidu.com/s/1c2D9Elq

  1. python binlog_rollback.py -f mysql-bin.000011 -uroot -p --start-datetime='2017-11-27 11:40:00' --stop-datetime="2017-11-27 12:00:00" -d mysql -o rollback.sql
  2. 此工具自动将where和set数据反转
  3. 将sql直接source即可

以上四种方式其实原理都一样,都是对binlog进行解析,再讲sql反向应用,达到恢复的效果,有时间可以试验一下。

> mysqlbinlog -v -B mysql-bin.000011 --base64-output=decode-rows --start-datetime="2017-11-27 11:40:00" | egrep -A4 -i  'UPDATE `mysql`.`user`|### SET'

UPDATE `mysql`.`user` WHERE @1='1.1.1.1' @2='test_user1' @3='*2A032F7C5BA932872F0F045E0CF6B53CF702F2C5' -- SET @1='1.1.1.1' @2='test_user1' @3='*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9' @4=2

原文发布于微信公众号 - MYSQL轻松学(learnmysql)

原文发表时间:2017-11-27

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏杨建荣的学习笔记

关于导入dump(r3笔记第98天)

在工作中,dump文件对于dba而言是再平常不过的文件了。 不过在导入dump文件的时候还是有很多的细节可以注意,可以避免一些不必要的问题。 exp/imp是比...

27110
来自专栏Java帮帮-微信公众号-技术文章全总结

JavaWeb06-MySQL深入学习这些就够了!

mysql-2 一.数据库备份与恢复 1. 备份 数据库的备份是指将数据库转换成对应的sql文件。 数据库导出sql脚本的格式: l mysqldump -u用...

3356
来自专栏Grace development

MySQL常用系统表汇总

本篇文章虽大部分内容为参考原文作者的相关内容,但对原文对于文章的逻辑与排版上进行了大范围修改,方便阅读与理解。原文链接在底部

582
来自专栏nummy

python manage.py migrate无效的问题

已有的model,修改之后,想重新建模,于是将migrations文件夹中除init.py 之外其他文件都删掉,再次执行以下步骤

251
来自专栏王硕

原 PostgreSQL下如何修改用户权限的介绍以及hook机制对超级用户的权限修改

48210
来自专栏吴生的专栏

MySQL 慢日志线上问题分析及功能优化

MySQL 慢日志(slow log)是 MySQL DBA 及其他开发、运维人员需经常关注的一类信息。使用慢日志可找出执行时间较长或未走索引等 SQL 语句,...

3716
来自专栏大数据和云计算技术

MongoDB Compass--MongoDB DBA必备的管理工具

MongoDB Compass是MongoDB官网提供的一个集创建数据库、管理集合和文档、运行临时查询、评估和优化查询、性能图表、构建地理查询等功能为一体的...

3285
来自专栏程序猿

mysql 语法集锦

使用SHOW语句找出在服务器上当前存在什么数据库: mysql> SHOW DATABASES; 创建一个数据库MYSQLDATA mysql> CREATE...

3108
来自专栏GreenLeaves

Oracle给Select结果集加锁,Skip Locked(跳过加锁行获得可以加锁的结果集)

1、通过select for update或select for update wait或select for update nowait给数据集加锁 具体实现...

1788
来自专栏乐沙弥的世界

MySQL 二进制日志(Binary Log)

    同大多数关系型数据库一样,日志文件是MySQL数据库的重要组成部分。MySQL有几种不同的日志文件,通常包括错误日志文件,二进制日志,通用日志,慢查询日...

482

扫描关注云+社区