MYSQL数据闪回方式

MYSQL官方截止目前还没有出来数据闪回特性,也许后续版本会出现。社区有一些开源工具可以使用,沿用的基本都是彭立勋最早提出的思路,利用binlog对SQL进行反向解析,从而实现数据闪回,例如不带where条件的update操作,导致全表数据被误更新。

闪回前提:

binlog_format = ROW

操作模拟:

没加where条件,导致全表更新;或者没加host列,导致多余行被更新。

我只想把user=test_user1,host=1.1.1.1改密码,但是没加host条件。此时并没有及时发现,直到报错才意识到操作失误。如果直到之前的密码那也还好,如果不知道就需要做数据恢复了。

闪回方式:

一、利用mysql自带的mysqlbinlog命令解析binlog,再通过grep、sed等命令把binlog中相关SQL误操作给逆向回来,然后导入SQL文件来恢复错误操作。

  1. 根据当时操作时间解析binlog
mysqlbinlog -v --base64-output=decode-rows mysql-bin.000011 --start-datetime="2017-11-27 11:40:00" --stop-datetime="2017-11-27 12:00:00" | egrep -A4 -i  'UPDATE `mysql`.`user`|### SET' > rollback.sql
  1. 将解析出来的日志再进行处理,将where和set数据反转后再导入恢复
  2. 这种方式比较麻烦,需要自己写一套转换脚本

二、利用彭立勋提供的工具mysqlbinlog,只支持5.5版本,随后社区提供了支持5.6以上版本工具

5.5版本:https://pan.baidu.com/s/1qXB8Zxy

5.6以上版本:https://pan.baidu.com/s/1dFtUNlf

  1. 下载对应版本的工具 绝对路径:/mysqlbinlog -v -B mysql-bin.000011 --base64-output=decode-rows --start-datetime="2017-11-27 11:40:00" --stop-datetime="2017-11-27 12:00:00" > rollback.sql
  2. 此工具自动将where和set数据反转
  3. 将注释去掉直接恢复即可

三、mysqlbinlog2sql、mysqlbinlog_flashback(类似二)

下载:git clone https://github.com/danfengcao/binlog2sql.git && cd binlog2sql

pip install -r requirements.txt

  1. python binlog2sql.py -uroot -h127.0.0.1 -p -dmysql --start-file='mysql-bin.000011' -B --start-datetime='2017-11-27 11:40:00' --stop-datetime="2017-11-27 12:00:00" > rollback.sql
  2. 此工具自动将where和set数据反转

四、脚本binlog_rollback.py

下载:https://pan.baidu.com/s/1c2D9Elq

  1. python binlog_rollback.py -f mysql-bin.000011 -uroot -p --start-datetime='2017-11-27 11:40:00' --stop-datetime="2017-11-27 12:00:00" -d mysql -o rollback.sql
  2. 此工具自动将where和set数据反转
  3. 将sql直接source即可

以上四种方式其实原理都一样,都是对binlog进行解析,再讲sql反向应用,达到恢复的效果,有时间可以试验一下。

> mysqlbinlog -v -B mysql-bin.000011 --base64-output=decode-rows --start-datetime="2017-11-27 11:40:00" | egrep -A4 -i  'UPDATE `mysql`.`user`|### SET'

UPDATE `mysql`.`user` WHERE @1='1.1.1.1' @2='test_user1' @3='*2A032F7C5BA932872F0F045E0CF6B53CF702F2C5' -- SET @1='1.1.1.1' @2='test_user1' @3='*6BB4837EB74329105EE4568DDA7DC67ED2CA2AD9' @4=2

原文发布于微信公众号 - MYSQL轻松学(learnmysql)

原文发表时间:2017-11-27

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏一枝花算不算浪漫

[Linux]Linux下安装和配置solr/tomcat/IK分词器 详细实例二.

373100
来自专栏禁心尽力

关于事务

何为事务? 1.事务是指事务开始到事务结束之间的一组sql语句的操作单元,并且是组内所有sql语句共同完成的业务逻辑。 2.要想使用事务,首先关闭系统自动提交功...

20750
来自专栏数据和云

SQL Server for Linux 下一版本的公共预览

当微软宣布即将发布SQL Server for Linux版本的时候,有些人觉得很兴奋,有些人觉得然并卵,但是既然Gartner在2016年的数据库管理系统魔...

35090
来自专栏沃趣科技

ASM 翻译系列第二十一弹:ASM Attributes Directory

原作者:Bane Radulovic 译者: 郭旭瑞 审核: 魏兴华 DBGeeK社群联合出品 ASM Attributes Directory A...

34340
来自专栏数据分析

[SQLServer大对象]——FileTable初体验

在我接触FileTable之前,存储文件都是存储文件的链接和扩展名到数据,其实并没有实际的把文件存储到数据库。 FileTable不同于一般的表,他可以存储非结...

41060
来自专栏Laoqi's Linux运维专列

再讲Mysql主从延迟(外赠MySQL异地多活的数据双向复制经验.pdf)

26220
来自专栏决胜机器学习

数据库专题(一) ——数据库优化

数据库专题(一) ——数据库优化 (原创内容,转载请注明来源,谢谢) 一、概述 数据库的优化通常分为三个方面:数据库DML、DQL的优化(即增删改查等SQL语...

38280
来自专栏ImportSource

白话数据库中的MVCC

说MVCC(Multiversion concurrency control,多版本并发控制)之前,先从数据库的ACID说起。ACID其中一个就是I。也就是Is...

60750
来自专栏Java架构师历程

MYSQL 谈谈各存储引擎的优缺点

1、存储引擎其实就是如何实现存储数据,如何为存储的数据建立索引以及如何更新,查询数据等技术实现的方法。

35120
来自专栏杨建荣的学习笔记

由小见大-MySQL脚本部署中的一些策略

在线上环境中部署脚本,可谓是常在河边走,哪有不湿鞋,所以大大小小的案例总结下来,还是会发现一些有趣的地方,这些可以作为操作时的一些参考,仅供参考而已。 第一类...

35060

扫码关注云+社区

领取腾讯云代金券