专栏首页爱可生开源社区第13问:pt-table-checksum 到底会不会影响业务性能?

第13问:pt-table-checksum 到底会不会影响业务性能?

问题

用 pt-table-checksum 时,会不会影响业务性能?

实验

实验开始前,给大家分享一个小经验:任何性能评估,不要相信别人的评测结果,要在自己的环境上测试,并(大概)知晓原理

我们先建一对主从:

然后用 mysqlslap 跑一个持续的压力:

开另外一个会话,将 master 上的 general log 打开:

然后通过 pt-table-checksum 进行一次比较:

查看 master 的 general log,由于 mysqlslap 的影响,general log 中有很多内容,我们找到与 pt-table-checksum 相关的线程:

将该线程的操作单独列出来:

操作比较多,我们一点一点来说明:

这里工具调小了 innodb 锁等待时间。使得之后的操作,只要在 innodb 上稍微有锁等待,就会马上放弃操作,对业务影响很小。

另外工具调小了 wait_timeout 时间,倒是没有特别的作用。

工具将隔离级别调整为了 RR 级别,事务的维护代价会比 RC 要高,不过后面我们会看到工具使用的每个事务都很小,加上之前提到 innodb 锁等待时间调到很小,对线上业务产生的成本比较小。

RR 级别是数据对比的基本要求。

工具通过一系列操作,了解表的概况。工具是一个数据块一个数据块进行校验,这里获取了第一个数据块的下边界。

接下来工具获取了下一个数据块的下边界,每个 SQL 前都会 EXPLAIN 一下,看一下执行成本,非常小心翼翼。

之后工具获取了一个数据块的 checksum,这个数据块不大,如果跟业务流量有冲突,会马上出发 innodb 的锁超时,立刻退让。

以上是 pt-table-checksum 的一些设计,可以看到这几处都是精心维护了业务流量不受影响。

工具还设计了其他的一些机制保障业务流量,比如参数 --max-load 和 --pause-file 等,还有精心设计的数据块划分方法,索引选择方法等。大家根据自己的情况配合使用即可达到很好的效果。

总结

本期我们介绍了简单分析 pt-table-checksum 是否会影响业务流量,坊间会流传工具的各种参数建议或者不建议使用,算命的情况比较多,大家都可以用简单的实验来分析其中机制。

还是那个观点,性能测试不能相信道听途说,得通过实验去分析。

本文分享自微信公众号 - 爱可生开源社区(ActiontechOSS),作者:黄炎

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2020-06-12

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 技术分享 | MySQL 监控利器之 Pt-Stalk

    一、概述 之前在社区发了一篇【有效解决 MySQL 行锁等待超时问题】文档,主要介绍了下行锁超时的监控方法,下方评论中有人提到了 pt-stalk 工具也可以监...

    爱可生开源社区
  • 故障分析 | Bad handshake,升级 5.7.28 引起的“血案”

    作为一名 DBA 碰到过升级出问题需要回退么?碰到过回退还解决不了问题么?我有幸遇到了一次凶险的升级“血案”。

    爱可生开源社区
  • 第08期:有关 MySQL 字符集的注意事项

    创建数据库时,显式指定字符集和排序规则,同时,当切换到当前数据库后,参数 character_set_database,collation_database 分...

    爱可生开源社区
  • myeclipse8.5安装svn插件

    1.http://subclipse.tigris.org/servlets/ProjectDocumentList?folderID=2240

    Hongten
  • 使用 iptables 简单配置 Linux 白名单

    3. 设置白名单,参数 -A 代表这里设置 10.0.1.0/24 和 10.0.2.0/24 两个网段

    tonglei0429
  • python|浅谈Python中的pickle模块

    Pickle模块用于将python对象序列化为字节流,可存储在文件或数据库中,也可同通过网络进行传输。使用反序列化(Unpickle)可以将生成的字节流转换回p...

    算法与编程之美
  • 分享两个著名的 WordPress 本地缓存插件

    虽然明月已经放弃使用 WordPress 本地缓存插件很久了(可参考【我为什么放弃了缓存插件?】),但是考虑到很多新手站长们依然在使用着虚拟主机服务器,所以今天...

    明月登楼
  • ASP.NET 防盗链的实现[HttpHandler]

    本文转载:http://www.cnblogs.com/eflylab/archive/2008/06/16/1223373.html

    跟着阿笨一起玩NET
  • GitHub宣布推出Classroom功能,协助老师工作,包括自动评分

    GitHub宣布推出GitHub Classroom功能,它是一组帮助计算机科学老师分配和评估编码练习的工具集合,同时也是用于协助教师的一组新工具。

    大数据文摘
  • H3C HWTACACS配置

     authentication login hwtacacs-scheme acs local

    py3study

扫码关注云+社区

领取腾讯云代金券