150万行的update查询需要很长时间来执行mysql - 腾讯云开发者社区

文章/答案/技术大牛

发布

PHP获取MySQL执行sql语句的查询时间方法

如下所示： //计时开始 runtime(); //执行查询 mysql_query($sql); //计时结束. echo runtime(1); //计时函数 function runtime($...rn"); } 　　//code... } 引用： phpmyadmin中的代码，获得query执行时间如下： // garvin: Measure query time. // TODO-Item...这个更适合统计多条sql的执行情况。我见过好像是一个博客，访问页面之后会有一个提示大概说共查询了几次数据库，用了多长时间查询数据，那么开启mysql的profile就可以轻松实现了。...引用2：PHP获取毫秒级时间戳的方法 java里面可以通过gettime();获取。如果是要与java写的某些程序进行高精度的毫秒级的对接通信，则需要使用PHP输出毫秒级的时间。...执行sql语句的查询时间方法就是小编分享给大家的全部内容了，希望能给大家一个参考，也希望大家多多支持。

7.9K0 0

【已解决】Mysql在更新的时候,需要更新的字段是其他表查询的值，这个时候update语句怎么写

Mysql在更新的时候,需要更新的字段是其他表查询的值，这个时候update语句怎么写？例如：我想要更新A表中的floor字段。但是这个字段的是是根据条件在B表中查询后，得到的值。...这样需求的sql语句怎么写？...要点：这里使用到了JOIN...ON语句UPDATE A表 a JOIN B表 b ON a.floor = b.mapping_value SET a.floor = b.id WHERE a.id ...= 1 AND b.type = 5执行上面语句之后就能将A表中id =5的且B表type=5查询后的id设置个A表的floor字段了

1.9K1 0

您找到你想要的搜索结果了吗？

是的

没有找到

Mysql中sql执行如此慢

我们经常发现,往往执行一条简单的查询语句,但是很长时间都没有返回,今天我们看看是什么原因导致的第一类:查询长时间不能返回执行下面语句 select * from t where id =1;...我们发现sql语句很长时间都不见返回响应，我们先看一下他的状态，发现果然是被锁住了. ? 此类问题我们直接可以找到谁持有MDL的写锁，直接kill....可以看到4号线程就是阻塞的罪魁祸首，因此只要干掉他就可以了, 不过，这里不应该显示kill query 4,这个命令是指把正在执行的语句停止，但是我们的update语句已经执行完成了,这样是无法去掉...第二类:查询慢我们执行下面语句 select * from t where c=50000 limit 1; 有字段c没有索引，这个语句只能全表扫描，因此要扫描5万行，再看看慢日志的记录. ?...发现扫描了50000行，消耗时间13.5毫秒，看起来很快，但是目前数据的数据只有10万行数据，如果数据量到千万级别，这个sql就会消耗很多时间。

2.1K3 0

Mysql日志解析

慢查询日志是用来记录执行时间超过指定时间的查询语句。...通过慢查询日志，可以查找出哪些查询语句的执行效率很低，以便进行优化。一般建议开启，它对服务器性能的影响微乎其微，但是可以记录mysql服务器上执行了很长时间的查询语句。可以帮助我们定位性能问题的。...一般都是通过long_query_time选项来设置这个时间值，时间以秒为单位，可以精确到微秒。如果查询时间超过了这个时间值（默认为10秒），这个查询语句将被记录到慢查询日志中。...10秒还包含由于其他资源被征用造成阻塞的查询执行时间或其他原因等都被记录到慢查询中。...如果很长时间不清理二进制日志，将会浪费很多的磁盘空间。

5.6K8 0

MySQL深入学习第十九篇－为什么我只查一行的语句，也执行这么慢？

一般情况下，如果我跟你说查询性能优化，你首先会想到一些复杂的语句，想到查询需要返回大量的数据。但有些情况下，“查一行”，也会执行得特别慢。...需要说明的是，如果 MySQL 数据库本身就有很大的压力，导致数据库服务器 CPU 占用率很高或 IO 利用率很高，这种情况下所有语句的执行都有可能变慢，不属于我们今天的讨论范围。...第一类：查询长时间不返回如下所示，在表 t 执行下面的 SQL 语句： select * from t where id=1; 查询结果长时间不返回。如下图1 查询长时间不返回： ?...作为确认，你可以看一下慢查询日志，注意，这里为了把所有语句记录到 slow log 里，我在连接后先执行了 set long_query_time=0，将慢查询日志的时间阈值设置为 0。...10 万行记录，数据量大起来的话，执行时间就线性涨上去了。

1.7K2 0

以及大事务产生的问题

专栏持续更新中：MySQL详解一、定义运行时间比较长，操作的数据比较多的事务我们称之为大事务。...例如，执行超过5s，10s，1min… 二、大事务风险锁定太多的数据，造成大量的阻塞和锁超时，回滚所需要的时间比较长。执行时间长，容易造成主从延迟。...大表定义：单表超过千万行、文件超过10G 大表对查询的影响：慢查询、区分度底、大量磁盘IO、建立索引需要很长的时间、修改表结构需要长时间锁表、影响正常的数据操作如何处理大表问题...难点：分表主键的选择、分表后夸分区数据的查询和统计。...大表的历史数据归档（前端增加历史查询）难点：时间点选择，如何进行归档操作六、在大促中数据库服务器数据库架构：主从复制、读写分离、集群等。

1.1K1 0

MySQL实战第十九讲－为什么我只查一行的语句，也执行这么慢？

一般情况下，如果我跟你说查询性能优化，你首先会想到一些复杂的语句，想到查询需要返回大量的数据。但有些情况下，“查一行”，也会执行得特别慢。...需要说明的是，如果 MySQL 数据库本身就有很大的压力，导致数据库服务器 CPU 占用率很高或 IO 利用率很高，这种情况下所有语句的执行都有可能变慢，不属于我们今天的讨论范围。...第一类：查询长时间不返回如下所示，在表 t 执行下面的 SQL 语句： select * from t where id=1; 查询结果长时间不返回。...作为确认，你可以看一下慢查询日志，注意，这里为了把所有语句记录到 slow log 里，我在连接后先执行了 set long_query_time=0，将慢查询日志的时间阈值设置为 0。...，但你要记住：坏查询不一定是慢查询，我们这个例子里面只有 10 万行记录，数据量大起来的话，执行时间就线性涨上去了。

1.6K3 0

分别在MySQL5.7和8.0中测试主从复制中主库表缺失主键会导致主从延迟的情况

②　dump线程压力大 ③　IO线程阻塞 ④　表缺乏主键或唯一索引（常见）假设主库更新一张500w表中的20w行数据，该update语句仅需要全表扫描1次；而在row格式下，记录到binlog日志中的...SQL为20w次update操作，此时SQL Thread重放将特别慢，因为每一次update都需要进行一次全表扫描，即从库需要执行20w次的全表扫描。...主从同步延迟与系统时间的关系，查看主从两台机器间系统时间差 ⑫　网络通信是否存在延时。...可以看出，在ROW模式下，在主库上执行了一条UPDATE语句，更新了2万行记录，但是在binlog中，记录了2万行的UPDATE语句。...-l 20000 可以看出，在从库上也是2万行的UPDATE语句，也是一条一条的进行更新。

8943 0

洞悉查询的脉搏：使用EXPLAIN工具深度解读MySQL SQL执行计划

在实际应用中，我们还可以使用EXPLAIN来查看INSERT、UPDATE、DELETE等DML语句的执行计划，只需在这些语句前添加EXPLAIN关键字即可。...rows约为998,200：MySQL估计需要扫描近100万行才能找到符合条件的记录，这与全表扫描一致。...性能对比与效果验证优化前后，我们对比一下查询性能：优化前：平均查询时间超过2秒，EXPLAIN显示全表扫描近100万行，额外排序操作。...优化后：平均查询时间降至50毫秒以下，EXPLAIN显示仅扫描150行，无需额外排序。...问：为什么EXPLAIN显示使用了索引，但实际查询时间依然很长？这可能是因为索引的选择不当或者索引失效。

8371 0

「Mysql索引原理（十）」冗余和重复索引

MySQL允许在相同列上创建多个索引，无论是有意的还是无意的。MySQL需要单独维护重复的索引，并且优化器在优化查询的时候也需要逐个进行考虑，这会影响性能。...例如，如果在整数列上有一个索引，现在需要额外增加一个很长的VARCHAR列来扩展该索引，那性能可能会急剧下降。特别是有查询把这个索引当做覆盖索引。...在state_id列有个索引对下面的查询有用，假设查询名为Q1： select count(*) from userinfo where state_id=5; 一个简单的测试表明，该查询的执行速度是每秒...对于这个查询，执行速度是每秒10次不到，提升该查询性能的最简单办法就是扩展索引为（state_id,city,address），让索引能覆盖查询： alter table userinfo drop...如果我们想让两个查询都变得更快，就需要两个索引，尽管这样一来原来的单列索引是冗余的了。这就带来了索引冗余的缺点，索引成本高了。插入时需要维护更多的索引，效率自然下降。

1.8K2 0

Explain 执行计划和 SQL优化

EXPLAIN关键字一般放在SELECT查询语句的前面，用于描述MySQL如何执行查询操作、以及MySQL成功返回结果集需要执行的行数。...执行计划用来显示对应语句在MySQL中是如何执行的。 Explain语句对select，delete，update，insert，replace语句有效。...：表示MySQL需要使用临时表来存储结果集，常见于排序和分组查询 Using filesort： MySQL中无法利用索引完成的排序操作称为“文件排序”，常见于order by和group by语句中...字段上增加函数，则字段上的索引用不了，需考虑改变写法去掉不影响查询结果的表慢查询日志开启慢查询日志，分日里面执行时间很长语句，可以针对性的对常用语句进行建立索引开启方法my.cnf...proc_students_noindex(); commit; 没有索引的表插入数据更快考虑性能消耗的情况这是500000万行的记录插入，有索引的插入时间更久，没有索引的插入更快用时整体时间都比没有索引的插入数据慢

1.2K2 0

MySQL系列优化（一）

MYSQL优化是一个非常大的课题，这篇文章主要介绍了跟MYSQL相关的4个方面，如果想深入研究可以查下相关资料。...进行慢查询分析 pt-kill 杀掉超长时间的SQL请求 pt-online-schema-change 来完成大表的ONLINE DDL需求 pt-table-checksum、pt-table-sync...来检查并修复mysql主从复制的数据差异四、Sql级别优化案例一：URL列索引优化 T_VIDEO表的SQL操作缓慢，出现性能问题，抓取慢查询，发现主要由大量如下类似的SQL语句执行缓慢： select...因为首先，查询语句执行时的Sending Data的时间会加长，当数据量达到一定程度的时候还会产生大量的临时表；其次需要消耗CPU和时间来做比较，性价比不高。...`datetime NOT NULLDEFAULT '2000-01-01 00:00:00' COMMENT 'APK更新时间', `APK_ID`varchar(150) NOT NULLDEFAULT

1.1K5 0

将MySQL去重操作优化到极致

t_source表是驱动表，需要扫描100万行。...，但还是需要扫描100万行记录。...也就是说4份数据的created_time要连续且互斥，连续保证处理全部数据，互斥确保了不需要二次查重。实际上这和时间范围分区的概念类似，或许用分区表更好些，只是这里省略了重建表的步骤。 2....@hdp2~]$ 可以看到，每个过程的执行时间均4.85，因为是并行执行，总的过程执行时间为最慢的4.91秒，比单线程速度提高了2.5倍。...，在事件定义中增加了操作日志表的逻辑，因为每个事件中只多执行了一条insert，一条update，4个事件总共多执行8条很简单的语句，对测试的影响可以忽略不计。

8.7K3 0

亲身体验的MySQL优化32大误区：你可能天天在犯

MySQL 为了比较，会把表中所有 user_id 转成数字。结果是进行了全表扫描！800万行，每次登录都要扫一遍。改回字符串后，响应时间从 6.3 秒降到 8 毫秒。...但在MySQL 5.7之前（甚至某些8.0场景），这种 IN (子查询) 会被物化为临时表且无法有效使用索引，导致外层查询对 orders 全表扫描。实际执行计划显示：外层扫描了2800万行。...子查询≠高效。在MySQL中，相关子查询（correlated subquery）尤其危险，可能被反复执行N次。...当然，也不是绝对的。如果表特别大，delete删除会耗费很多时间，且产生大量的binlog,分批DELETE删需要有足够的空间，且控制休眠等，此时就需要考虑在业务低峰期用truncate方式清理。...因为 MySQL 的 utf8 实际是 utf8mb3，最多 3 字节，而 emoji 需要 4 字节。

3111 0

主从延迟的5大“元凶”+3个排查命令，别再让从库拖后腿

关键词：主从延迟、MySQL优化、数据库避坑大家好呀！我是数据库小学妹上一篇我们讲了读写分离和查询路由，把读流量分流到从库，系统吞吐量翻倍。...='LOGICAL_CLOCK';STARTSLAVE;将大事务拆分为多个小事务（如每1万行提交一次）考虑分库分表，分摊主库写入压力元凶3：从库在执行大查询（慢SQL）现象：从库上有个大查询跑了...解决：将大事务拆成小批量（如每次1万行，循环执行）避免在业务高峰期做大批量数据清理大表DDL用pt-online-schema-change工具，减少锁表时间二、3条命令，快速揪出延迟原因SHOWSLAVESTATUS...SHOWPROCESSLIST——看从库在干啥展开代码语言：TXTAI代码解释SHOWPROCESSLIST如果看到一条SQL执行时间很长（Time列很大），说明从库被慢查询卡住了！...但会略微增加主库响应时间，需权衡使用。五、总结主从延迟是读写分离中最常见的痛点，但并不可怕！

2091 0

【MySQL百日打怪升级第16天】UPDATE 与 DELETE 的最佳实践：锁升级到底是怎么发生的？

他那条DELETE没走索引，直接全表扫了200万行，锁了其中10万行。后面所有的写入都在等锁释放。今天的目标：搞懂UPDATE/DELETE的锁行为和正确姿势。...拿一个公式来记：展开代码语言：TXTAI代码解释锁的范围=扫描的行数（不是最终改的行数）这个很多人不知道。常见的认知偏差是："我只改10行，凭什么锁了100万行？"...：先SELECTid出来，再用多表JOIN语法DELETE/UPDATEDELETE/UPDATE加子查询，低版本有隐藏陷阱MySQL官方文档明确写了一条限制：对单表的DELETE/UPDATE语句，优化器不会使用...semijoin和物化优化这意味着DELETEFROMtWHEREidIN(SELECT...)在低版本（5.5/5.6）上，子查询可能被当作相关子查询逐行执行，性能灾难官方建议的workaround就是改写成多表...UPDATE后在同一事务里直接SELECT，能读到更新后的数据吗？跟隔离级别有关系吗？一张表5000万行，你要删掉3000万行旧的。说说你的方案——注意不能把业务拖垮。

2841 0

关系数据库基础理论

如果数据库有上千万行数据，那么我们使用时，需要把这上千万行数据全部载入内存中，再使用，对硬件的要求会很高而且载入时间很长，但其实我们需要比较的也只是那一行数据而已。 3. 数据孤立。...、文件管理器、缓冲区管理器查询管理器应该具有的组件（功能）：DML解释器、DDL解释器、查询执行引擎数据存储和查询的执行过程： 1....查询管理器接收用户查询，并理解。使用DML和DDL解释器 2. 将DML和DDL解释器的结果给查询执行引擎 3. 查询执行引擎的结果给存储管理器 4....单进程多线程守护线程:比如数据库将数据从缓冲区管理器写到磁盘上去,这个操作和应用没有任何关系,所以这些都是需要数据库本身来完成的....三、关系运算关系运算主要为了实现mysql语句的执行投影:只输出指定属性选择:只输出符合条件的行,类似于通过WHERE完成自然连接:具有相同名字的所有属性上所有取值相同的行笛卡尔积:不考虑表与表只见的关系

1.3K2 0

delete一张大表引发的一点思考

这里需要说明一下delete大表的时候带来的影响，delete一张大表的时候，如果记录数太多，则需要锁住很多数据，这个操作将占满整个事务日志，耗尽系统资源，阻塞很多小的但是很重要的查询语句。...解决这个问题方法大概有两种： 1、在delete的时候将limit后面的值设置的更小一点，每次删除一小部分内容，而且删除之后，都暂停一小会儿再做下一次删除，这样可以讲服务器上原本一次性的压力分散到一个很长的时间段中...2、优化删除的SQL，在这个例子中，其实id是有主键的，我当时想到的是这个日志表是按照时间的顺序增长的，而id也是增长的，如果我们知道删除某一段时间的日志的SQL，可以通过查询时间和id的对应关系，将它转化为删除某一个区间内...这个问题是暂时结束了，但是可能大家对这种delete的操作没有很多概念，于是我是用线上一个已经停止使用的阿里云rds备份log库做了一个实验，查看一下这个库在一次delete操作的时候需要的时间： mysql...，删除七千多万条数据，阿里云rds的执行时间大约是8分钟，而删除一千万数据大约时间是2分钟40秒，这个时间只是让大家大概有个概念，如果你要一次性删除三四千万的数据，算上服务器配置，你可以预估一下操作时间

1.1K2 0

一个案例彻底弄懂如何正确使用 mysql inndb 联合索引

分析上面的sql执行的逻辑：从联合索引里找到所有小于该审核时间的主键id（假如在该时间戳之前已经审核了100万条数据，则会在联合索引里取出对应的100万条数据的主键 id）未来如果有一个优化就好了，...（假如有50万行都是ONLINE，则继续对这50万行进行排序）最后因为数据量很大，虽然只取5行，但是按照我们刚刚举的极端例子，实际查询了100万行数据，而且最后还在内存中进行了50万行数据库的内存排序...所以是非常低效的。画了一个示意图，说明第一步的查询过程，粉红色部分表示最后需要回表查询的数据行。图中我按照索引存储规律来YY伪造填充了一些数据，如有不对请留言指出。...还是分析下在添加了该索引之后的执行过程：从联合索引里找到小于该审核时间的audit_time最大的一行的联合索引然后依次往下找，因为的值是分散的。...所以需要依次往前查找，匹配出满足条件（status='ONLINE'）的索引行，直到取到第5行为止。回表查询需要的具体数据 ?

7282 0

执行计划进阶：读懂统计信息与基数估算，理解优化器的“思考方式”

但有一个问题一直没回答：优化器是根据什么来决定走哪个执行计划的？你肯定遇到过这种情况：明明有合适的索引，优化器却选了全表扫描；明明A计划更快，优化器却选了B计划。...条件的估算数据分布（直方图）了解列值的分布情况影响范围查询的估算举个例子：一张订单表有1000万行，status列有3个不同值（PAID、UNPAID、REFUND）。...执行ANALYZETABLEuser_logs更新统计信息后，优化器重新估算，发现user_id=12345在500万行中只有几十条记录，复合索引被正确选中，查询从5秒降到了0.05秒。...方法二：查看统计信息的最后更新时间--MySQLSELECTtable_name,update_timeFROMinformation_schema.tablesWHEREtable_name='your_table...';如果统计信息已经几周甚至几个月没有更新，而表的数据变化很大，就需要执行ANALYZETABLE。

1131 0

点击加载更多

PHP获取MySQL执行sql语句的查询时间方法

【已解决】Mysql在更新的时候,需要更新的字段是其他表查询的值，这个时候update语句怎么写

Mysql中sql执行如此慢

Mysql日志解析

MySQL深入学习第十九篇－为什么我只查一行的语句，也执行这么慢？

以及大事务产生的问题

MySQL实战第十九讲－为什么我只查一行的语句，也执行这么慢？

分别在MySQL5.7和8.0中测试主从复制中主库表缺失主键会导致主从延迟的情况

洞悉查询的脉搏：使用EXPLAIN工具深度解读MySQL SQL执行计划

「Mysql索引原理（十）」冗余和重复索引

Explain 执行计划和 SQL优化

MySQL系列优化（一）

将MySQL去重操作优化到极致

亲身体验的MySQL优化32大误区：你可能天天在犯

主从延迟的5大“元凶”+3个排查命令，别再让从库拖后腿

【MySQL百日打怪升级第16天】UPDATE 与 DELETE 的最佳实践：锁升级到底是怎么发生的？

关系数据库基础理论

delete一张大表引发的一点思考

一个案例彻底弄懂如何正确使用 mysql inndb 联合索引

执行计划进阶：读懂统计信息与基数估算，理解优化器的“思考方式”

相关资讯

热门标签

活动推荐

运营活动

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐