首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    mysql binlog恢复数据实战

    数据库备份 数据库恢复的先决条件是,定时备份数据库,缩小binlog恢复范围.首先我们备份测试数据库数据: mysqldump -uroot -p --database test > testBackSql.sql...假定它为最后一次备份数据. test数据库,test数据最后一个id为164 ?...刷新后,新的binlog用于做恢复数据时的记录, 因为当执行备份文件恢复数据和binlog恢复时,都会产生新的binlog,不要和原来的数据进行冲突.  ...(如果涉及多个binlog,需要执行多个binlog恢复日志) 通过查询binlog,获取到最后恢复点:  /www/server/mysql/bin/mysqlbinlog /www/server/data...将原有备份数据恢复:  cat testBackSql.sql |mysql -uroot -p ? 备份数据已经恢复了,开始恢复二进制数据.

    3.5K10

    MySQL基于Binlog的数据恢复实战

    1、环境状态说明 2、恢复流程说明 2.1 正向恢复 2.2 反向恢复 3、数据准备 3.1 查询当前binlog数据状态 3.2 查找恢复position区间 3.3 position点确认...4、操作恢复 4.1 正向恢复 4.1.1 恢复备份数据 4.1.2 恢复binlog日志 4.1.3 检查数据恢复状态 4.2 反向恢复 4.2.1 安装binlog2sql 4.2.2 生成反转...2、恢复流程说明 按照正反两种方式分别进行测试恢复 2.1 正向恢复 主要思路 通过全量备份恢复当日0:00时间点的数据 通过binlog恢复当日0:00-22:00错误语句之前的全部语句 2.2 反向恢复...4.2 反向恢复 反向恢复时通过binlog2sql,将错误执行的update语句反转,再update回来 4.2.1 安装binlog2sql 项目地址: https://github.com/danfengcao...root -p # 密码 -d # 指定过滤数据库(可忽略) -t # 指定过滤

    2.1K30

    MySQL】通过SQL_Thread快速恢复binlog

    将数据库回档至指定时间点或位置,常常是使用全量备份+binlog增量实现的。 而数据量很大的情况下,增量恢复binlog一直是一个苦恼的问题。 因为恢复binlog速度十分慢,并且容易出错。...以下所有框可左右滑动 建议横屏阅读 常见binlog增量恢复方式 先解析成sql文件,再导入MySQL mysqlbinlog mysql-bin.000001 --start-position=n >...通过sql_thread恢复 处理思路: 1)重新初始化一个实例,恢复全量备份文件。 2)找到第一个binlog文件的position,和剩下所有的binlog。...binlog恢复。...该测试使用的版本为:MySQL 5.7.16 效果: 快速恢复到指定位置点,即通过全备文件+binlog恢复到故障前的最后一个position。

    1.3K51

    1 监听mysql内容变化,mysql开启binlog

    binlog 就是binary log,二进制日志文件,这个文件记录了mysql所有的增、删、改语句。通过binlog日志我们可以做数据恢复,做主从复制等等。...可以看到,只要有了这个binlog,我们就拥有了mysql的完整备份了。 我们时常会碰到这样的需求,就是要监听某个的变化,然后来做一些操作。...如果该数据只增加、不删除修改的话,要监听比较简单,可以定时去查询最新的id即可。但要有删除、修改操作的话,免不了就得全扫描,效率极低。倘若该发生变化时,能触发个事件之类的可供监听,那最好不过。...binlog默认是关闭的,我们要开启它,就需要来修改mysql的配置文件。 mac上brew安装的mysql,默认安装后的目录是/usr/local/Cellar,版本是5.7.21。 ?...查看第一个binlog文件的内容 show binlog events。 查看指定binlog文件的内容 show binlog events in 'mysql-bin.000004'。

    3.4K60

    1 监听mysql内容变化,mysql开启binlog

    binlog 就是binary log,二进制日志文件,这个文件记录了mysql所有的增、删、改语句。通过binlog日志我们可以做数据恢复,做主从复制等等。...可以看到,只要有了这个binlog,我们就拥有了mysql的完整备份了。 我们时常会碰到这样的需求,就是要监听某个的变化,然后来做一些操作。...如果该数据只增加、不删除修改的话,要监听比较简单,可以定时去查询最新的id即可。但要有删除、修改操作的话,免不了就得全扫描,效率极低。倘若该发生变化时,能触发个事件之类的可供监听,那最好不过。...binlog默认是关闭的,我们要开启它,就需要来修改mysql的配置文件。 mac上brew安装的mysql,默认安装后的目录是/usr/local/Cellar,版本是5.7.21。...查看第一个binlog文件的内容 show binlog events。 查看指定binlog文件的内容 show binlog events in 'mysql-bin.000004'。

    3.2K10

    通过MySQL relaylog + SQL_Thread 增量恢复binlog

    而数据量很大的情况下,增量恢复binlog一直是一个苦恼的问题,因为恢复binlog速度十分慢,并且容易出错。...恢复binlog文件一般有两种方法: 〇 先解析成sql文件,再导入MySQL mysqlbinlog mysql-bin.000001 --start-position=n > /data/add.sql...〇 处理思路:     1)重新初始化一个实例,恢复全量备份文件。     2)找到第一个binlog文件的position,和剩下所有的binlog。     ...5.7.16 效果:恢复全备文件+binlog恢复到故障前的最后一个position。...并且在需要增量的binlog文件越大的情况下,效果越明显。 〇 优点:     可以断点恢复,人为控制进度,比如stop slave或者遇到错误时,可以断点恢复

    1.3K20

    Mysql 通过全量备份和binlog恢复整体数据

    某天工作时间,一个二货犯晕登错生产当测试环境了,直接drop了一个数据库,需要紧急恢复!可利用备份的数据文件以及增量的 binlog 文件进行数据恢复。...具体思路归纳几点: 1、恢复条件为 MySQL 要开启 binlog 日志功能,并且要全备和增量的所有数据。 2、恢复时建议对外停止更新,即禁止更新数据库。....sql 8.检查并移动binlog文件,并导出为 SQL 文件剔除其中的 drop 语句,查看 MySQL 的数据存放目录, 由下面可知是在/mysql_data下,将 binlog 文件导出SQL文件.../home/mysql/mysql5/bin/mysqlbinlog --no-defaults /tmp/mysql-bin.000004 > /tmp/04.sql 注意:在恢复全备数据之前必须将该...binlog文件移出,否则恢复过程中,会继续写入语句到 binlog,最终导致增量恢复数据部分变得比较混乱。

    4.2K71

    Mysql误删,恢复数据,binlog闪回,宝塔面板

    传统恢复方法是利用备份重搭实例,再应用去除错误sql后的binlog恢复数据。 此法费时费力,甚至需要停机维护,并不适合快速回滚。...也有团队利用LVM快照来缩短恢复时间,但快照的缺点是会影响mysql的性能。 MySQL闪回(flashback)利用binlog直接进行回滚,能快速恢复且不用停机。...本文将简单进行mysql根据binlog闪回数据的实战测试 基础知识准备 binlog是二进制日志文件,用来记录Mysql内部对数据库的改动(只记录对数据的修改操作),主要用于数据库的主从复制以及增量恢复...所以有这种根据binlog得到执行sql语句、闪回sql语句,我们只需要利用根据分析binlog,然后就可以找到准确的数据改动sql,并得到闪回sql,检查无误后执行就可以恢复数据了 准备工作 我们采用...= /var/log/mysql/mysql-bin.log max_binlog_size = 1G binlog_format = row binlog_row_image = full 在宝塔面板中

    3K20

    MySQL恢复步骤详解

    虽然已经很久没进行单恢复了,但大致步骤都还在脑海中,没花多久就搞定了~ 言归正传,记录一下单恢复的步骤和关键点,提醒自己也提醒大家。...第二步: 联系那个犯错的开发同学要错误的SQL语句和时间点,然后从主库的binlog中找到这条SQL的执行点。...第四步: 在主库上将写花的改名,其目的有二个,其一,停止对这个的写入(当然这对业务会有一定的影响,会出现一段时间内的写入失败报警,需要提前和业务部门联系好),其二,一旦恢复失败,至少还有一个写花的存在...最后将这个文件传输到主库服务器上,完成最后的恢复操作 ### 可以选择登陆mysql之后 source tablename.sql; ### 也可以在cmd界面 mysql -uusername -...第五步: 基本DBA的事情就没有了,这时候就需要告诉开发同学恢复完毕,进行应用测试及数据正确性效验了。如果一切都没有问题之后,我们需要将刚才rename的drop掉,整个恢复操作就算大功告成了。

    2.2K10

    使用binlog2sql针对mysql进行数据恢复

    MySQL闪回原理与实战 DBA或开发人员,有时会误删或者误更新数据,如果是线上环境并且影响较大,就需要能快速回滚。传统恢复方法是利用备份重搭实例,再应用去除错误sql后的binlog恢复数据。...也有团队利用LVM快照来缩短恢复时间,但快照的缺点是会影响mysql的性能。 MySQL闪回(flashback)利用binlog直接进行回滚,能快速恢复且不用停机。...开胃菜 某天,小明因种种原因,误删了大批线上用户的数据。他急忙找到公司DBA请求帮助,“客服电话已被打爆,大量用户投诉无法登陆,领导非常恼火。请问多久能恢复数据?”...闪回原理 binlog概述 MySQL binlog以event的形式,记录了MySQL server从启用binlog以来所有的变更信息,能够帮助重现这之间的所有变化。...Empty set (0.00 sec) 恢复数据步骤: 登录mysql,查看目前的binlog文件 mysql> show master status; +------------------+

    80540

    MySQL利用binlog恢复误操作数据(Python脚本)

    方法一、利用最近的全量备份+增量binlog备份,恢复到误操作之前的状态,但是随着数据量的增大,binlog的增多,恢复起来很费时。...说明: 0、前提是binlog的格式为row 1、要恢复操作前后结构没有发生变更,否则脚本无法解析 2、只生成DML(insert/update/delete)的rollback语句 3、最终生成的...SQL是逆序的,所以最新的DML会生成在输入文件的最前面,并且带上了时间戳和偏移点,方便查找目标 4、需要提供一个连接MySQL的只读用户,主要是为了获取结构 5、如果binlog过大,建议带上时间范围...,也可以指定只恢复某个库的SQL 6、SQL生成后,请务必在测试环境上测试恢复后再应用到线上 (备注:获取实验中的Python脚本,请关注公众号(DBA的辛酸事儿)或扫描文末二维码,后台恢复binlog_rollback.../mysql_3306/log/mysql3306.000006 /*!

    1K30

    MySQL binlog

    作用主要有: 复制:MySQL Replication在Master端开启binlog,Master把它的二进制日志传递给slaves并回放来达到master-slave数据一致的目的 数据恢复:通过mysqlbinlog...工具恢复数据 增量备份 2、binlog的数据格式 MySQL Replication 复制可以是基于一条语句 (Statement Level) ,也可以是基于一条记录 (Row Level),可以在...模式,否则很容易导致主从服务器的数据不一致情况发生; 另外,针对系统库 MySQL 里面的发生变化时的处理准则如下: 如果是采用 INSERT,UPDATE,DELETE 直接操作的情况,则日志格式根据....000001 ## 或者,远程读取 binlog 文件 $ mysqlbinlog -R -hIP -uNAME -pPASSWORD mysql-bin.000001 恢复数据 #基于时间点恢复:....000001 | mysql -uroot -p123456 # 基于时间点恢复: $ mysqlbinlog --start-position= 428 --stop-position=671

    3K50
    领券