// pt-table-checksum命令检查数据一致性 // 今天上班遇到了一个主从复制失败的问题,问题的表现是从库复制报错,最终通过修改参数slave_exec_mode的方法暂时解决了问题...这个可能还是个问题,于是我想到了pt-table-checksum这个工具,这个工具之前用的比较少,今天再来总结总结这个工具的用法。...~]$ /usr/local/mysql_tools/percona-toolkit-3.0.4/bin/pt-table-checksum --replicate=test.yeyz --nocheck-replication-filters...ERRORS :检查时候发生错误和警告的数量。 DIFFS :0表示一致,1表示不一致。...TABLE :被检查的表名。 可以看到,最后的结果中检测行数是2,DIFFS是0,也就是没有检测出来不同,这和我们的预期不符。
例如,如果要安装需要特定 MySQL 版本的应用程序,则需要在安装开始之前确定 MySQL 服务器的版本。...在本文中,我们将向您展示如何检查系统上安装的 MySQL 或 MariaDB 服务器的版本。...64 使用 MySQL 客户端查看版本 命令客户端实用程序 mysql 也可用于确定 MySQL 服务器的版本。...要连接到 MySQL 服务器,只需键入 mysql : mysql 连接到 MySQL shell 后,该版本将打印在屏幕上: Welcome to the MySQL monitor....这样的 MySQL 客户端,则可以使用 PHP 确定 MySQL 服务器的版本。
6.修改默认3306端口 描述 避免使用熟知的端口,降低被初级扫描的风险 加固建议 编辑/my.cnf文件,[mysqld] 段落中配置新的端口参数,并重启MySQL服务: port...=0,5.6及以上版本应该配置为skip_symbolic_links=yes,并重启mysql服务。...,并重启mysql服务: log-error= 10.删除’test’数据库 描述 测试数据库可供所有用户访问,并可用于消耗系统资源。...删除测试数据库将减少MySQL服务器的攻击面。...配置文件/my.cnf,在[mysqld] 段落中配置local-infile参数为0,并重启mysql服务: local-infile=0
MySQL 基线检查项 参考链接: https://github.com/wstart/DB_BaseLine 账号权限基线检查 run_power_test 启动 MySQL 的系统账号 是否单独创建...且 不允许登陆 默认管理员账号是否存在 高级权限账号 是否是必须 系统数据库 MySQL 的高级权限账号 是否必须 具有特定的高级权限账号是否必须 File_priv 文件权限 Process_priv...创建用户权限 Grant_priv 赋权权限 reload_priv 重载权限 repl_slave_priv 主从数据库权限 密码为空的账号是否存在 不受IP限制的账号可登录 空用户的账号 网络连接基线检查...= 'datadir' 检查MYSQL命令执行历史记录 ~/.mysql_history 敏感的日志,查询,错误,审计文件 log_bin_basename log_error slow_query_log_file...general_log_file audit_log_file relay_log_basename 数据库配置基线检查 run_config_test 错误日志是否开启 SHOW variables
pt-table-checksum是一个基于MySQL数据库主从架构在线数据一致性校验工具。其工作原理在主库上运行, 通过对同步的表在主从段执行checksum, 从而判断数据是否一致。...三、演示pt-table-checksum -- 环境:Master 192.168.1.8, Slave 192.168.1.12,主从已构建 -- 演示中,mysql提示符为:用户名@主机名[库名]...a、环境准备 --对用于执行checksum的用户授权,注,如果主从复制未开启mysql系统库复制,则从库也同样执行用户创建 master@localhost[test]> grant select,...TABLE :被检查的表名。...–replicate= 把checksum的信息写入到指定表中,建议直接写到被检查的数据库当中。 –databases= 指定需要被检查的数据库,多个则用逗号隔开。
这个时候我们就要借助percona公司的pt工具来进行处理,pt-table-checksum和pt-table-sync分别检验master-slave的数据不一致并修复,避免了人工分析并筛选binlog...pt-table-checksum针对的binlog_format=statement的格式,根据pt-table-checksum的原理,它在执行的时候,没有将会话级别的binlog_format=statement...pt-table-checksum 3.0.4在执行时缺少SET@@binlog_format='STATEMENT',建议不要使用。...Linux on x86_64 [root@172-16-3-190 we_ops_admin]# pt-table-checksum --version pt-table-checksum 3.0.4...根据pt的执行机制,那到底是那一步出现问题了呢,有一种很挫的方法,仅仅是为了看差异结果(生产环境勿用),执行pt-table-checksum前,在主上 set global binlog_format
1.确保MYSQL_PWD环境变量未设置 描述 MYSQL_PWD环境变量的使用意味着MYSQL凭证的明文存储,极大增加MySQL凭据泄露风险。...加固建议 删除系统环境变量中MySQL密码(MYSQL_PWD)配置 2.匿名登录检查 描述 检查MySQL服务是否允许匿名登录 加固建议 登录MySQL数据库,执行以下命令删除匿名账户: delete...加固建议 编辑Mysql配置文件/my.cnf,删除log-raw参数,并重启mysql服务 4.禁止使用–skip-grant-tables选项启动MySQL服务 描述 使用此选项...加固建议 编辑Mysql配置文件/my.cnf,删除skip-grant-tables参数,并重启mysql服务 5.为MySQL服务使用专用的最低特权账户 描述 使用最低权限账户运行服务可减小...MySQL天生漏洞的影响。
本文概述了Oracle database 21c中引入的 CHECKSUM 分析函数。可以用于检查表的内容是否已变更。...这对于检查表的内容是否已更改非常有用。校验和基于一组行的传入表达式,该表达式不受行顺序的影响。表达式可以是列、常量、绑定变量或组合它们的表达式。它支持除ADT和JSON之外的大多数数据类型。...-- ALL : The default action. select checksum(sal) as checksum_total, checksum(all sal) as checksum_total_all..., checksum(unique sal) as checksum_total_unique from emp; CHECKSUM_TOTAL_DISTINCT CHECKSUM_TOTAL_UNIQUE...三、CHECKSUM 分析函数 CHECKSUM 分析函数的基本定义描述如下。
/bin/bash source ~/.bashrc Slave_IO_Running_S=$(mysql -uroot -p123456 -S /data1/3306/mysqldata/mysql.sock...:.*)') Slave_SQL_Running_S=$(mysql -uroot -p123456 -S /data1/3306/mysqldata/mysql.sock -e "show slave...mysql -uroot -p123456 -S /data1/3306/mysqldata/mysql.sock -e "stop slave;set global sql_slave_skip_counter...$Last_SQL_Error_S" >> /home/mysql/sql_slave_skip_1.log fi test_slave_status.sh #!..._1.sh sleep $step done exit 0 crontab调用: * * * * * /home/mysql/test_slave_status.sh
---- 背景 最近读 MySQL 的官方文档发现 8.0.16 版本引入的一个新功能 ---- 参数检查。...新版本的 mysqld 程序,包含了一个参数检查的功能。 ---- 用法 用法上和启动 MySQL 服务差不多,只是要明确地告诉 mysqld 这次只做参数检查,不要启动服务。...grep --color=auto mysqld 可以看到 8.0.29 , 8.0.30, 8.0.31 三个版本同时在我的机器上跑着,有一次我无意间用一个 8.0.31 的 mysqld 程序去检查一个...8.0.30 版本的配置文件,它还真给我检查出了一些毛病。...可以看到它通过配置文件找到了 basedir ,并且默默的帮我检查了 basedir 下的文件对不对,这也真的够仔细了。 ----
MySQL Shell提供了一套工具集,用户可以利用这套工具集完成不同的MySQL 任务。在这一篇文章里,将为读者介绍升级检查器。...用户可以使用升级检查器来检查MySQL 5.7服务器实例,以及MySQL 8.0服务器实例与最新MySQL 8.0版本的兼容性错误和升级问题。...升级检查器可以检查服务器实例的配置文件(my.cnf或my.ini)。...从输出报告可以看出,升级检查器在21个方面进行了检查,最终得出一个警告信息和一个提示。...通过以上的例子,读者可以发现,MySQL Shell提供的升级检查工具能够帮助用户检测版本兼容性,减轻升级工作负担。
校验和(Checksum) PE的可选映像头(IMAGE_OPTION_HEADER)里面,有一个Checksum字段,是该文件的校验和,一般EXE文件可以使0,但一些重要的和系统DLL及驱动文件必须有一个校验和...Windows 提供了一个API函数MapFileAndCheckSum 测试文件的Checksum,它位于IMAGEHLP.DLL链接库里,其原型: ULONG MapFileAndCheckSum...{ LPSTR FileName, // 文件名 LPDWORD HeaderSum, // 指向PE文件头的CheckSum...LPDWORD new_checksum // 指向新计算出的Checksum } 程序一旦运行后,new_checksum 地址处将放当前的文件的校验和,old_checksum地址指向PE文件的checksum
如何计算UDP/TCP检验和checksum 一、下面的图是一个UDP的检验和所需要用到的所有信息,包括三个部分: 1.UDP伪首部 2.UDP...其目的是让UDP两次检查数据是否已经正确到达目的地,只是单纯为了做校验用的。...二、计算检验和(checksum)的过程很关键,主要分为以下几个步骤: 1.把伪首部添加到UDP上; 2.计算初始时是需要将检验和字段添零的; 3.把所有位划分为...字节的进位部分的值加到最低位上,举例,0xBB5E+0xFCED=0x1 B84B,则将1放到最低位,得到结果是0xB84C 5.将所有字相加得到的结果应该为一个16位的数,将该数取反则可以得到检验和checksum
另外很多时候需要把一个从库提升为主库,但对从库和主库的数据一致性不能保证一样,所以就利用 pt-table-checksum 工作来检查主从的一致性,以及通过 pt-table-sync 如何修复这些不一致的数据...[OPTIONS] [DSN] pt-table-checksum:在主(master)上通过执行校验的查询对复制的一致性进行检查,对比主从的校验值,从而产生结果。...从错误信息得出,要是不改binlog模式的话,则在执行上面的命令时候要指定: —no-check-binlog-format,即: [root@MySQL-01 ~]# pt-table-checksum...--replicate= :把checksum的信息写入到指定表中,建议直接写到被检查的数据库当中。 --databases= :指定需要被检查的数据库,多个则用逗号隔开。...h=192.168.0.20,u=root,p=123456 --execute 没发现任何异常,然后检查主从数据的一致性: [root@MySQL-01 ~]# pt-table-checksum
/bin/bash Check MySQL_Slave Status MySQL version: 5.6.27 MySQL_PORT=netstat -an|grep "LISTEN"|grep "3306
前言 在MySQL 8.0版本中,引入了一个非常有用的新特性 — 检查性约束,它可以提高对非法或不合理数据写入的控制能力;接下来我们就来详细了解一下。...检查性约束 创建、删除与查看 (1)可以在建表时,创建检查性约束 mysql> CREATE TABLE t1 -> ( -> CHECK (c1 c2), ->...) Records: 0 Duplicates: 0 Warnings: 0 (3)可以通过下列语句,删除检查性约束 mysql> ALTER TABLE t1 DROP CONSTRAINT c3...限制 (1)自增列和其他表的列,不支持检查性约束 (2)不确定的函数,如CONNECTION_ID(),CURRENT_USER(),NOW()等,不支持检查性约束 (3)用户自定义函数,不支持检查性约束...(4)存储过程,不支持检查性约束 (5)变量,不支持检查性约束 (6)子查询,不支持检查性约束 总结 检查性约束,还是一个非常不错的功能,可以实现丰富的数据校验场景,大家可以尝试一下。
本文给出几种获取文件MD5 (CheckSum)的方法。 文件使用MD5 CheckSum的目的?...在一些场景中,比如文件传输(如插件、固件升级包等),MD5 CheckSum的作用就是用于检查文件完整性,检测文件是否被恶意篡改。...Apache网站上,我们下载文件的时候,都可以看到MD5 checksum的值,如下图所示: 接下来,我们就给出几种文件产生MD5 (checkSum)的方法。...代码如下: 完整代码和测试 上述几种方法,完整的示例和测试代码如下~ 测试代码如下: 代码运行如下: 和Apache页面上下载文件poi-bin-3.16-20170419.zip的MD5 checkSum
回忆一下,自己是否在网站上下载文件时看到过Checksum这个东西,一串字符串?...【作用】就是用于检查文件完整性,检测文件是否被恶意篡改,比如文件传输(如插件、固件升级包等)场景使用。...(file, Hashing.md5()).toString(); } return checksum; } 验证 最后,我们一起来验证一下上述几种方法对文件的checksum计算...method=genChecksum3,checksum=2fa39c79790c29c53368ec0c14fdea97 采用SHA-256计算checksum method=genChecksum1...,checksum=d8db4f8228d87935ca46b0af72db68ad83f45b31d885e67b089d195b5ee800bb method=genChecksum2,checksum
降低访问表时的IO,提高mysql性能,释放表空间降低磁盘空间使用率。 怎么解决mysql碎片(data_free字段即为碎片)? 如何查看某个表的data_free?.../abc #重新启动mysql 发现磁盘空间释放了 service mysql start #备份数据库 #还原数据 进行清楚是需要注意些什么?...MySQL官方建议不要经常(每小时或每天)进行碎片整理,一般根据实际情况, 只需要每周或者每月整理一次即可(我们现在是每月凌晨4点清理mysql所有实例下的表碎片)。...不是简单查询操作.所以把 Optimize 命令放在程序中是不妥当的,不管设置的命中率多低,当访问量增大的时候,整体命中率也会上升,这样肯定会对程序的运行效率造成很大影响.比较好的方式就是 做个shell,定期检查...bin/mysql -u$mysql_user -p$mysql_pass -e "show databases" | grep -v "Database" > /opt/databases sed
本文指南非常适合MariaDB、MySQL 企业版和MySQL 社区版用户,为了演示如何检查 MySQL 用户权限,我们将首先创建具有不同 MySQL 权限的不同测试用户。...创建一个新的 MySQL 用户 首先,使用以下命令从 Linux 终端获取对MySQL数据库的 root 访问权限: $ mysql -u root -p 创建 MySQL 用户的命令语法如下: CREATE...'; 现在让我们创建几个 MySQL 数据库用户。...用户的权限,我们将执行以下命令: GRANT INSERT ON mysql.user TO 'user3'@'%'; 在 MySQL 中检查用户权限 要检查用户的数据库权限,请参考命令语法: SHOW...GRANTS FOR username; 要检查这三个用户权限: SHOW GRANTS FOR user1@localhost; SHOW GRANTS FOR user2@localhost;
领取专属 10元无门槛券
手把手带您无忧上云