首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

mysql由于临时表导致IO过高的性能优化过程分享

线上mysql数据库爆出一个慢查询,DBA观察发现,查询时服务器IO飙升,IO占用率达到100%, 执行时间长达7s左右。...g.type_id AND t.deleted = 0 WHERE g.deleted = 0 ORDER BY g.modify_time DESC LIMIT 20 ; 【问题分析】 使用explain查看执行计划...DBA观察到的IO高,是因为sql语句生成了一个巨大的临时表,内存放不下,于是全部拷贝到磁盘,导致IO飙升。 【优化方案】 优化的总体思路是拆分sql,将排序操作和查询所有信息的操作分开。...从100%降到不到1% 在SSD机器上测试,优化前大约需要7s,优化后第一条0.3s,第二条0.1s,优化后执行速度是原来的10倍以上,IO从100%降到不到1% 可以看出,优化前磁盘io是性能瓶颈,SSD...使用explain查看执行计划,Extra列看到Using temporary就意味着使用了临时表。

3.2K40
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    mysql查看版本sql_linux查看mysql版本

    【使用命令行查看mysql版本-直接查看】:在命令行输入“mysql–version",按”Enter“键即可....【使用命令行查看mysql版本-mysql变量查看】:在命令行输入“mysql",按”Enter“进入mysql命令行模式,输入”showvariableslike’version’;“即可....【在wamp查看】:点击wampserver,选择”mysql“子目录”version“即可....status可以看到 1、使用-V参数首先我们想到的肯定就是查看版本号的参数命令,参数为-V(大写字母)或者–version使用方法:D:\xampp\mysql\bin>mysql-V或者D:\xampp...\mysql\bin> 查看mysql版本方法一:status;方法二:selectversion(); 一般情况下,mysql会默认提供多种存储引擎,你可以通过下面的查看:看你的mysql现在已提供什么存储引擎

    21.4K10

    Linux 查看磁盘IO并找出占用IO读写很高的进程

    登录该服务器后通过 iostat -x 1 10 查看了相关磁盘使用信息。...由上图可知,vdb磁盘的 %util【IO】几乎都在100%,原因是频繁的读取数据造成的。...await:平均每次IO请求等待时间。(包括等待队列时间和处理时间,毫秒为单位) r_await:平均每次IO读请求等待时间。...通过这个命令可以看见比较详细信息,如:进程号,磁盘读取量,磁盘写入量,IO百分比,涉及到的命令是什么「两个都是 grep 命令造成的IO读取量大」。...可见其中 grep 命令占用了大量的读IO,之后可根据 PID 查看相关进程信息。 说明:本图与上图的PID不同,原因是上图涉及的进程执行完了,本图是之后执行产生的进程【都执行的同一个脚本】。

    52.6K44

    Mysql占用过高CPU时的优化手段

    Mysql占用CPU过高的时候,该从哪些方面下手进行优化?...占用CPU过高,可以做如下考虑: 1)一般来讲,排除高并发的因素,还是要找到导致你CPU过高的哪几条在执行的SQL,show processlist语句,查找负荷最重的SQL语句,优化该SQL,比如适当建立某字段的索引...; 2)打开慢查询日志,将那些执行时间过长且占用资源过多的SQL拿来进行explain分析,导致CPU过高,多数是GroupBy、OrderBy排序问题所导致,然后慢慢进行优化改进。...的sql语句睡眠连接超时时间设置问题(wait_timeout) 14)使用show processlist查看mysql连接数,看看是否超过了mysql设置的连接数(http://www.cnblogs.com...可以将mysql全局变量wait_timeout的缺省值改大。 查看mysql手册,发现对wait_timeout的最大值分别是24天/365天(windows/linux)。

    4.8K120

    MySQL 故障诊断:MySQL 占用 CPU 过高问题定位及优化

    ◆ CPU 占用过高常见现象 在使用 MySQL 的过程中会遇到各种瓶颈问题,常见的是 IO 瓶颈,但是有时候会出现服务器 CPU 使用率超过 100%,应用页面访问慢,登录服务器负载很高。...◆ 检查服务器线程 方法一: top -H -p 先通过 top 找出占用 CPU 使用率 100% 的 MySQL 进程 32232,在具体查看该进程下的线程情况。...◆ 查看 MySQL 进程 在 MySQL 中看看当前连接是否有什么异常。...0 rows affected (0.05 sec) 到目前为止,介绍了几种常用的 MySQL 占用 CPU 过高的定位方法,你是否掌握了。...◆ 优化一下也不难 前面介绍了几种常用的排查 MySQL 占用 CPU 过高问题排查的方法,那么当我们遇到问题了,如何解决,如何优化呢?

    16.4K35

    线上IO问题跟踪-剖析MySQL IO路径

    为了获取IO来源,在slave机上部署mysqld实例监控,以及iotop采集监控,获取对应时间段更详细的相关信息,抓取对应时间段进行IO写入的进程(线程),同时观察对应时间段mysql实例状态。...这段时间内的较大IO写入线程号为:(截取部分记录) 时间 线程号 进程名 读取速度 写入速度 00:07:34 145378 be/4 mysql201 139.10 K/s 263111.57 K/s...一个slave mysql读取relay log进行日志回放,首先想到回放执行语句,可能由此引发下列写入IO: mysql server binlog日志记录,即回放过程中语句写入的本地binlog。...为了印证这个写入来源,继续在innodb层添加日志跟踪,对于idb文件扩展加入以下逻辑进行日志跟踪: 每100MB扩展数据量,查看累计时间,如果累计时间在1秒以内,打印一条warning日志,且sleep...查看对应时间段新增日志(+8为北京时间), ?

    1.2K30

    linux查看进程占用cpu、内存、io信息

    COMMAND:进程启动命令名称 常用的命令: P:按%CPU使用率排行 T:按TIME+排行 M:按%MEM排行 /proc/pid目录 获取程序pid lsof -i:3306 假如我获取的mysql...的pid为3779 那么获取内存使用情况 cat /proc/3779/status | grep VmRSS 我们可以进入这个目录查看可用信息 cd /proc/3779/ ls -l 常用(N为进程的...查看swap free -h 或者 cat /proc/swaps 3) 查看某个程序的内存占用 获取程序pid lsof -i:3306 或者 ps -aux | grep mysqld 假如我获取的...mysql的pid为3779 那么获取内存使用情况 cat /proc/3779/status | grep VmRSS 或者 top -p 3779 CPU 消耗CPU前10排序的进程 ps aux...| sort -k3nr |head -n 10 查看CPU占用 排序 top 然后按 P IO 每隔1s查询一次 共查询10次 iostat 1 10 路由信息 查看主机路由信息 netstat -

    35.3K01

    MySQL占用CPU过高 查找原因及解决 多种方式

    一、排查有没有地方占用SQL资源过多 1、排查方法 : > mysql -uroot -p      #登陆数据库 >********                    #输入数据库密码 2、查看数据库...; 三、mysql中的wait_timeout坑 mysql> show variables like '%timeout%';  首先解释一下: wait_timeout — 指的是mysql在关闭一个非交互的连接之前所要等待的秒数...MySQL 的默认设置下,当一个连接的空闲时间超过8小时后,一到高峰期肯定会造成,会有太多的TCP连接没关闭,数据库连接数肯定是不够。从而会产生CPU占用过高,服务器告警等问题。...    #增加以上两列即可,因为官方文档要求修改此参数必须同时修改interactive_timeout    1.2、重启数据库    service mysqld restart      1.3、查看数据库参数是否修改成功...    连接MySQL 然后查看 show variables like ‘wait_timeout’; 2、第二种修改方式 不需重启MySQL   mysql> show variables like

    7.3K00

    转载|线上IO问题跟踪-剖析MySQL IO路径

    为了获取IO来源,在slave机上部署mysqld实例监控,以及iotop采集监控,获取对应时间段更详细的相关信息,抓取对应时间段进行IO写入的进程(线程),同时观察对应时间段mysql实例状态。...这段时间内的较大IO写入线程号为:(截取部分记录) 时间 线程号 进程名 读取速度 写入速度 00:07:34 145378 be/4 mysql201 139.10 K/s 263111.57 K/s...一个slave mysql读取relay log进行日志回放,首先想到回放执行语句,可能由此引发下列写入IO: mysql server binlog日志记录,即回放过程中语句写入的本地binlog。...为了印证这个写入来源,继续在innodb层添加日志跟踪,对于idb文件扩展加入以下逻辑进行日志跟踪: 每100MB扩展数据量,查看累计时间,如果累计时间在1秒以内,打印一条warning日志,且sleep...查看对应时间段新增日志(+8为北京时间), ?

    81430
    领券