首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Percona Toolkit解决MySQL主从不同步问题

一、简单介绍 percona-toolkit工具中最主要的三个组件分别是: 1)pt-table-checksum 负责监测mysql主从数据一致性 2)pt-table-sync 负责当主从数据不一致时修复数据...,让它们保存数据的一致性 3)pt-heartbeat 负责监控mysql主从同步延迟 二、主机关系 主库:192.168.1.158:3306 从库:192.168.1.159:3306 主从关系 root...--replicate-check-only :只显示不同步的信息。 --replicate= :把checksum的信息写入到指定表中,建议直接写到被检查的数据库当中。...--databases= :指定需要被检查的数据库,多个则用逗号隔开。...--databases= : 指定执行同步的数据库。 --tables= :指定执行同步的表,多个用逗号隔开。

79530

MySQL生产环境主从关系数据不同步

故障现象:两个数据库数据大小不一致,主从有问题,我重新建立主从关系后从的IO和SQL线程状态都是yes但是不同步数据。...首先这个是生产环境已经投入使用的,不可能换主的数据库,不能线上终止业务 这两个数据库MySQL都是运行在docker容器内的,主库重启也要报备一下 排查步骤: 主的话可以使用: 查看主库状态: mysql...ceair库中新建立一个表但是不同步主从复制数据还是有问题,上图中可以看出只复制ceair和ceair_zipkin库,在主ceair里面创建新的也没用,也是比较困扰我的,毕竟都是yes状态还不复制确实蒙蔽...,相信遇见问题的你也是一样的现在开始慢慢排查 1.都是yes首先连接性可以保证了没有问题都是通的,防火墙也没问题 2.现状就是在状态ok下~主从不同步数据,按照指定的库去创建也不管用 网上的方法众多但不是我想要的...docker pull mysql:5.6 环境比较干净,没有正式环境配置的那么多参数,也没有写限制的数据库语句,按照自己搭建主从的方式做了一遍没问题主从能复制 不能直接断定是镜像的问题 毕竟生产环境换镜像换数据库不可能的

66020
您找到你想要的搜索结果了吗?
是的
没有找到

MySQL生产环境主从关系数据不同步

故障现象:两个数据库数据大小不一致,主从有问题,我重新建立主从关系后从的IO和SQL线程状态都是yes但是不同步数据。...首先这个是生产环境已经投入使用的,不可能换主的数据库,不能线上终止业务 这两个数据库MySQL都是运行在docker容器内的,主库重启也要报备一下 排查步骤: 主的话可以使用: 查看主库状态:...ceair库中新建立一个表但是不同步主从复制数据还是有问题,上图中可以看出只复制ceair和ceair_zipkin库,在主ceair里面创建新的也没用,也是比较困扰我的,毕竟都是yes状态还不复制确实蒙蔽...,相信遇见问题的你也是一样的现在开始慢慢排查 1.都是yes首先连接性可以保证了没有问题都是通的,防火墙也没问题 2.现状就是在状态ok下~主从不同步数据,按照指定的库去创建也不管用 网上的方法众多但不是我想要的...docker pull mysql:5.6 环境比较干净,没有正式环境配置的那么多参数,也没有写限制的数据库语句,按照自己搭建主从的方式做了一遍没问题主从能复制 不能直接断定是镜像的问题 毕竟生产环境换镜像换数据库不可能的

1K10

一则mysql主从不同步问题分析

开发环境出现了主从不同步,在slave节点上显示的SlaveIORunning: Connecting,SlaveSQLRunning: Yes,导致有些查询出现不一致的情况 问题分析 一般这种问题出现的原因主要有以下五点...: 主库机器和从库机器网络不通 可以互ping的方式来查 密码不对 mysql -uroot -p 以对应的用户名和密码登录master mysql server重新对slave授权来排查,具体授权方式见下文...master和slave的pos不正确 在master机器上mysql -uroot -p 登录,然后执行show master status \G; 查看pos和binXX.log的情况; 在slave...从上面两点开始怀疑是不是用户权限的问题,于是到master mysql控制台操作: mysql> grant all privileges on *.* to host112@"slave host"...Query OK, 0 rows affected (0.01 sec) 再查询从库状态 看到 SlaveIORunning: Yes SlaveSQLRunning: Yes 总结 一般情况下出现主从不一致要从上面几个方面排查

1.4K20

mysql数据库主从同步

教程所用环境:centos7 + mysql5.5.57 一、起步准备  主库服务器:192.168.43.200  从库服务器:192.168.43.201  均安装mysql5.5.57  //这里最好安装同一版本的数据库...,创建mysql用户(或者使用已经存在的也行),并且给予只能进行主从同步 /*新建用户,使用已有用户的略过进行下面的*/ /*设置的主机只允许192.168.43.201进行连接访问*/ mysql> ...器后再运行下面的命令*/ mysql> flush privileges; 二、数据导入与导出 flush tables with read lock;  将主要要同步到从库的数据库导出(注意这里一定要将主库锁定停止操作...),然后将导入的数据库导入到从库中去(注意主从表名一致),如果在这里导入数据的状态不一致或者有表的主键自增不一致,则会导致无法同步,这里操作从简单,但要谨慎操作。...三、配置从库服务器(192.168.43.201):  1、打开/etc/my.cnf配置文件,进行如下配置 #主从复制的表 replicate-do-db=db replicate-ignore-db

6.9K10

Mysql数据库设置主从同步

主从复制的原理 分为同步复制和异步复制,实际复制架构中大部分为异步复制。...环境描述 OS:Centos6 主服务器master:192.168.11.120 从服务器slave:192.168.11.139 mysql主从配置 mysql主服务器配置(master) master...GRANT OPTION; #更新数据库权限mysql>flush privileges; 锁定所有表(防止数据库状态值变化,锁定后,这时候只能读,不能写,写请求会在解锁后执行) mysql>  FLUSH...# 启用二进制日志binlog-do-db=sakzss #指定数据库,如果不指定就是全部数据库 重启服务器: service mysqld restart # centos6重启mysql 设置同步源...mysql数据库同步验证 主从数据库设置工作已经完成,可以在master新建数据库和表,插入和修改数据,查看slave是否获得同步,测试一下是否成功。

11K00

Mysql数据库主从心得整理

管理mysql主从有2年多了,管理过200多组mysql主从,几乎涉及到各个版本的主从,本博文属于总结性的,有一部分是摘自网络,大部分是根据自己管理的心得和经验所写,整理了一下,分享给各位同行,希望对大家有帮助...:   历史悠久,技能成熟   binlog文件较小   binlog中包含了所有数据库修改信息,可以据此来审核数据库的安全等情况   binlog可以用于实时的还原,而不仅仅用于复制   主从版本可以不一样...注:在实际的生产应用中发现,在mysql5.0以前的版本,mysql的这个过滤设置几乎是形同虚设,不起作用:不管你在主库或是从库上设置了忽略某个数据库或是表,他依然会进行同步,所以在做5.0以前版本的主从同步时...,一定保持主从数据库的一致性,主上有的库或是表从上一定要有,否则在同步的过程会出错。   ...3、实现主从同步   3.1.实现数据库的统一   检查主从数据库的配置文件,查看是否已正确配置。首次实现 同步要备份主库上需要同步的数据库,然后完整的导入到从库中。

1.8K70

mysql主从同步配置读写分离_mysql8做主从数据库

这时候,我们会考虑如何减少数据库的连接,下面就进入我们今天的主题。 利用主从数据库来实现读写分离,从而分担主数据库的压力。...在多个服务器上部署mysql,将其中一台认为主数据库,而其他为从数据库,实现主从同步。...这个功能,是由google为MYSQL引入的。 本文说的是在centos 7系统上,实现的mysql5.7数据库主从同步配置,从而实现读写分离操作。...最好就是令从数据库与主数据库的数据结构和数据都一致了之后,再来恢复主从同步的操作。...数据库主从同步就完成了,至于读写分离,我们可以通过程序来实现,这里简单讲解一下实现思想。

2.1K20

mysql数据库主从复制教程

此时两台机子的mysql应该是可以相互访问的,如果不可以,导致的原因有很多,最常见的是防火墙没关,或者是安全组没有放通3306端口(从) 主数据库配置 登录主服务器,进入mysql的配置文件/etc/mysql...重启服务(这个是ubuntu的重启方式之一): $ /etc/init.d/mysql restart 进入mysql,查看主服务器mysql master状态: mysql> show master...log-bin-index=master-bin.index server-id可以是其他,但是不能与主服务器上的一样 从数据库连接主服务 在从服务器中,登录数据库,输入: mysql> change...: Slave_IO_Running: Yes Slave_SQL_Running: Yes 测试 在主数据库上创建一个test_zhucong的数据库,创建一个test表 可以看到,从数据库也相应的有了这个数据库以及表...注意 做主从复制时,首先确定两台服务器的mysql没任何自定义库(否则只可以配置完后之前的东西没法同步,或者两个库都有完全相同的库应该也是可以同步,图中主数据库有些数据库在从的里面没有,就是因为主从设置之前

2.6K50

MySQL数据库实现主从复制

基于这种情况,就出现了主从复制这个技术。 **主从复制:**就是有两个数据库服务器,一个是主(master)数据库服务器,另一个是从(slave)数据库服务器。...配置如下: # 不同步哪些数据库 binlog-ignore-db = mysql binlog-ignore-db = test binlog-ignore-db = information_schema...# 只同步哪些数据库,除此之外,其他不同步 # binlog-do-db = game 整个配置完成之后是以下这个样子的: [mysqld] datadir=/var/lib/mysql socket...# 开启二进制日志 server-id=1 # 设置server-id # 不同步哪些数据库 binlog-ignore-db = mysql binlog-ignore-db...从上面的测试来看,我们的数据是已经保证了主从数据一致了。也表命令了我门只要对主(master)数据库进行写入操作,从(slave)数据库就会作相应的操作,保证主从(slave)数据库数据一致。

2.6K30

MySQL数据库主从复制Replication

一、主从复制架构的搭建: 1、MySQL5.6 数据库主从(Master/Slave)同步安装与配置详解请参考: http://blog.csdn.net/xlgen157387/article/details.../52452394 二、MySQL主从复制过程及原理: 1、MySQL主从复制的原理: Slave从Master获取binlog二进制日志文件,然后再将日志文件解析成相应的SQL语句在从服务器上重新执行一遍主服务器的操作...的主从复制,首先必须打开master端的binlog (mysql-bin.xxxxxx)日志功能,否则无法实现mysql主从复制。...六、如何提高Mysql主从复制的效率: 对于提升MySQL主从复制的复制效率,binlog的大小是非常重要的因素,因为它涉及了I/O和网络传输,所以我们主要看一下master/slave这两端可以如何优化...因为MySQL判断是否须要复制某个Event,不是根据产生该Event的语句所在的数据库,而是根据执行时所在的默认数据库,也就是登录时指定的数据库,或运行“USE DATABASE”中所指定的数据库

3.4K40

MySQL数据库主从同步配置

如果没有本篇,上一篇文章实际就是主从复制,DCGH-DB1为Master,DCGH-DB2为从服务器。本文承接上文,本文完整阐述MySQL主从复制、主主复制。 二、系统架构简图 ?...按照之前思路:数据库服务器DCGH-DB1及DCGH-DB2互为主备;DCGH-DB1与DCGH-DB3中则以前者为主,后者为备。...六、完成从DCGH-DB1复制到DCGH-DB2的主从复制配置 1.登录到DCGH-DB3,进行主从配置。...八、注意事项 1.主主同步需要2个MySQL用户,主从同步只需一个MySQL用户,用户满足条件之后还需要注意权限。 2.在同步之前需要保证两端数据一致,涉及到备份及还原。...3.排除不需要复制的数据库需要在my.cnf的mysqld字段下加replicate-ignore-db,多个库需要使用逗号隔开。

6.2K10

Mysql主从

简介: 数据库高可用一直是企业的重中之重,而采用主从方案,一主一从,能实现负载均衡,读写分离的作用,分担数据库的负荷,提高性能,而如果搭配keepalived还能实现高可用性,当主服务器故障以后,自动切换到从服务器上...前提: mysql主从的搭建前提有: 两台虚拟机 两台虚拟机上都装有mysql,并且版本一样,两边的mysql数据库文件一致,mysql的安装方式我在前面博客已经介绍过了。...环境: Host Role IP mysql-1 Master 192.168.30.106 mysql-2 Slave 192.168.30.107 搭建 在主从服务器上都创建一个用户 $ mysql...测试的过程我这里就不说了,自己尝试, 缺点 主从虽然能解决数据库服务器负载过高的问题以及备份的问题,但是主从同步是有延迟的,特别是当慢查询语句过多,主从服务器性能差别较大,或者网络中断情况的时候,也会造成同步延迟的问题...MySQL数据库主从同步延迟解决方案 最简单的减少slave同步延时的方案就是在架构上做优化,尽量让主库的DDL快速执行 还有就是主库是写,对数据安全性较高,比如sync_binlog=1,innodb_flush_log_at_trx_commit

2.7K10

MySQL数据库,浅谈MySQL集群主从复制

在实际的开发环境中,数据的重要性不言而喻,每一个数据都是有其价值的,提供安全可靠的数据保障是技术与运维部门的职责所在;为了保障数据的安全性,大多数的开发都采用了数据库主从复制,其中MySQL集群主从复制也是保障...MySQL数据库数据安全的一道坚不可摧的防线。...MySql高并发的处理方案就是多主多从,可以极大地提高数据库的容灾能力,降低磁盘I/O访问的评率,提高单个机器的I/O性能。 下面我们来看看MySQL集群主从复制的具体步骤: 1....最后 I/O Thread 和 SQL Thread 将进入睡眠状态,等待下一次被唤醒; :mysql要做到主从复制,就是A服务把自己所做的增删改的操作全都记录在日志中,B数据库就根据这份日志上面的操作在自己身上再操作一遍...总而言之,MySQL集群主从复制的存在是符合客观规律的,既实现服务器负载均衡,又通过复制实现数据的异地备份,从而提高了数据库系统的可用性。

2.8K20

MySQL数据库备份之主从同步配置

墨墨导读:本文介绍MySQL数据库备份之主从同步配置,通过将腾讯云服务器上的MySQL备份到本地服务器中这个例子来做出展开解释。 主从同步意义?...---- 主从同步使得数据可以从一个数据库服务器复制到其他服务器上,在复制数据时,一个服务器充当主服务器(master),其余的服务器充当从服务器(slave)。...通过配置文件,可以指定复制所有的数据库,某个数据库,甚至是某个数据库上的某个表。...机制 ---- MySQL服务器之间的主从同步是基于二进制日志机制,主服务器使用二进制日志来记录数据库的变动情况,从服务器通过读取和执行该日志文件来保持和主服务器的数据一致。...配置主从同步的基本步骤 ---- 有很多种配置主从同步的方法,可以总结为如下的步 在主服务器上,必须开启二进制日志机制和配置一个独立的ID开启方法 在每一个从服务器上,配置一个唯一的ID,创建一个用来专门复制主服务器数据的账号

4.7K31

MySQL数据库备份之主从同步配置

导读:本文介绍MySQL数据库备份之主从同步配置,通过将腾讯云服务器上的MySQL备份到本地服务器中这个例子来做出展开解释。 主从同步意义?...---- 主从同步使得数据可以从一个数据库服务器复制到其他服务器上,在复制数据时,一个服务器充当主服务器(master),其余的服务器充当从服务器(slave)。...通过配置文件,可以指定复制所有的数据库,某个数据库,甚至是某个数据库上的某个表。...机制 ---- MySQL服务器之间的主从同步是基于二进制日志机制,主服务器使用二进制日志来记录数据库的变动情况,从服务器通过读取和执行该日志文件来保持和主服务器的数据一致。...配置主从同步的基本步骤 ---- 有很多种配置主从同步的方法,可以总结为如下的步 在主服务器上,必须开启二进制日志机制和配置一个独立的ID开启方法 在每一个从服务器上,配置一个唯一的ID,创建一个用来专门复制主服务器数据的账号

4.7K20

Zabbix实现对MySQL数据库主从监控

1.主从关系建立 配置MySQL-master端: 1)修改mysql-master的配置文件 [root@localhost ~]# vim /etc/my.cnf [mysqld] server_id...datadir=/data/mysql socket=/var/lib/mysql/mysql.sock 2)登入数据库,建立组从连接 MariaDB [(none)]> change master...php php-mysql -y 10)php连接本地数据库配置 [root@localhost ~]# vim /var/lib/zabbix/percona/scripts/ss_get_mysql_stats.php.cnf...zabbix zabbix 1235 Jul 16 01:00 /tmp/localhost-mysql_cacti_stats.txt 6.创建自定义mysql主从监控模板、监控项 在mysql-slave...红色为警戒线,绿色为正常 10)当mysql-slave服务挂掉时在查看此图,获取的数值已经超过红色警戒线,证明主从连接断开,已挂 11)仪表盘出现报警故障信息 12)进入报警查看详情 13)显示报警详细内容

2.7K20

windows下MySQL数据库主从复制

关于MySQL数据库主从复制,网上相关文章多数是基于Linux环境,笔者曾有 实施过Windows环境下MySQL数据库主从复制。...# 待同步的数据库 # 需要同步的数据库名,如果有多个数据库,可重复此参数,每个数据库一行 binlog-do-db = test # 不同步mysql系统数据库 binlog-ignore-db =...=test # 不同步mysql系统数据库 binlog-ignore-db = mysql port=3307 skip-errors=all relay-log=mysql-relay-bin 【注意事项...【说明事项】 主从间的数据库不是实时同步,就算网络连接正常,也存在瞬间,主从数据不一致。 如果主从的网络断开,从会在网络正常后,批量同步。...,如果有多个数据库,可重复此参数,每个数据库一行 binlog-do-db = test # 不同步mysql系统数据库 binlog-ignore-db = mysql server-id = 1 auto_increment_offset

3.1K60
领券