之前开发项目的过程当中数据库存储的数据量都不是很大，在表的设计当中就只有一个主键索引。很少接触到数据库的索引，SQL 优化这些东西。公司目前的项目数据达到了百万级别了，让我优化一下慢 SQL，之前是懂一些 SQL 优化和索引相关的理论知识，没有实际操作过，特此记录优化的过程和思路，事实证明，理论和实操还是有不少区别的。
最近在某个群关于MYSQL 的一个优化的问题，让我必须写这篇文字，主要事情是一个同学提出MYSQL 相关的语句性能的问题，但是这个语句一看就不大像是搞基于MYSQL 开发有经验的人员撰写的，更像是ORACLE移植过来的语句，这边解释了一下关于MYSQL 语句优化的几种方法，基于MYSQL的数据库产品，不能将所有的语句优化都堆积到 MYSQL 数据库本身，而应是有步骤的，将一部分优化的方式迁移到程度端来操作，并提出优化后会产生多次访问数据库的情况。
例1： 没有携带on的条件字句,此条slq查询的结构集等价于,a表包含的条数*b表包含的乘积：
客户生产系统上的SQL, 表越来越大, 执行时间越来越长, 不过只要能跑出结果, 只要不是慢到无法接受, 用户基本上都忍了.
预告: 下一次培训主要面向DBA, 讲一下ora工具的用法与用途,大概需要一天时间.
梁敬彬老师的《收获，不止SQL优化》，关于如何缩短SQL调优时间，给出了三个步骤，
数据库相关 mysql索引的数据结构，加索引的原则 InnoDB和myiasm的区别，以及常见的mysql优化方案 sql查询优化 说说Mysql的sql优化 mysql的索引，b+树索引是否支持范围查询，联合索引的失效情况 开发中用了那些数据库？回答mysql，储存引擎有哪些？然后问了我悲观锁和乐观锁问题使用场景、分布式集群实现的原理。 数据库索引原理 mysql索引 B+树原理 mysql索引是怎么实现的？b+树有哪些特点？真实的数据存在哪里？哪些情况下建索引？解释下最左匹配原则？现在一个表有三列a
小伙伴想精准查找自己想看的MySQL文章？喏 → MySQL专栏目录 | 点击这里
这里写的是一个系列，这是系列的第三篇，这个系列主要是针对SQL优化，前两篇的地址下文字的最下方。
曾经写过关于如何得到Oracle执行计划的文章，《一个执行计划异常变更的案例 - 外传之查询执行计划的几种方法》，其中介绍了各种能得到SQL执行计划的方法，梁老师的书《收获，不止SQL优化》，对这几种方法，从获取步骤、优缺点、应用场景等方面，做了系统整理，可以比较学习，
上篇文章回忆了innodDB的独立表空间和系统表空间的结构，因为需要梳理的知识点太多，所以额外用一篇。
BATJTMD等大厂的面试难度越来越高，但无论从大厂还是到小公司，一直未变的一个重点就是对SQL优化经验的考察。一提到数据库，先“说一说你对SQL优化的见解吧？”。SQL优化已经成为衡量程序猿优秀与否的硬性指标，甚至在各大厂招聘岗位职能上都有明码标注，如果是你，在这个问题上能吊打面试官还是会被吊打呢？
在我2014年总结的“SQL Tuning 基础概述”中，其实已经介绍了一些查看SQL执行计划的方法，但是不够系统和全面，所以本次SQL优化专题，就首先要系统的介绍一下查看SQL执行计划的方法。 本文示例SQL为： --set lines 1000 pages 1000 select a.empno, a.ename, b.dname, a.job, a.sal from emp a, dept b where a.deptno = b.deptno and empno = 7788; 1.explain
很多数据库会随着时间的增长越来越慢, 今天通过一个小案例说明一下. 文章结尾可能有你需要的东西.
5.7以前，该项是explain partitions显示的选项; 5.7以后成为了默认选项.
本博客只记录工作中的一次oracle sql调优记录，因为数据量过多导致的查询缓慢，一方面是因为业务太过繁杂，关联了太多表。面对复杂的业务场景，确实有些情况是需要关联很多表的。当然有些情况是可以将业务实现放在Java代码里，有些情况可以不要关联很多表。
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/u014427391/article/details/89604262
最近拜读《收获，不止SQL优化》一书，并做了笔记，方便自己以后回顾，同时放在网上或许也有益于别人
本博客只记录工作中的一次oracle sql调优记录，因为数据量过多导致的查询缓慢，一方面是因为业务太过繁杂，关联了太多表。面对复杂的业务场景，确实有些情况是需要关联很多表的。当然有些情况是可以将业务实现放在Java代码里，有些情况可以不要关联很多表。不过因为本人不做DBA工作，是做开发的，所以本博客只能参考，不能当做规范
211本，985硕，女生，方向都是Java开发或者后台开发。 目前拿到了字节，百度，网易（白菜价，已拒），美团，小米的意向书，等最终结果通知的是华泰（已收到体检通知），招行信用卡，阿里 招银（资料审查中），网易互娱（二面没去），浦发（没去体检），农行（面试通过，没去笔试），腾讯（两次被捞都是一面挂,第三次还是深圳拒绝了面试），微软（笔试完），银联（笔试完），微博（拒绝了现场面试） 还有各种笔试挂的（流利说，爱奇艺，小红书，B站），后续拒绝了很多面试，再也没有精力再去了，持续躺尸中.... 实习
本人将这几天面试的题目总结一些，如果出现错误请指正，谢谢。 1，谈一谈spring。 答：spring是为java程序开发提供的综合性的基础java开发平台，它提供了从表现层SpringMVC到业务层Spring再到持久层springData的一套完整的解决方案。spring的核心有两大块，第一块是AOP，面向切面编程，它将程序与业务分离，集中来解决一些公共问题。第二块是IOC,控制反转，由容器来帮助对象寻找依赖并实现注入。 spring实现了低耦合，它可以与很多主流框架进行集成，如mybbatis，struts等。 2，谈一谈spring IOC/DI。 答：IOC，就是将对象的创建权，交给IOC容器来进行管理，IOC帮助对象寻找对象依赖并注入，而不是由对象主动去找。 IOC容器就像一个婚介所一样，我们先在婚介所登记我们需要怎么样的女朋友，然后婚介所会根据条件来为你提供一个女朋友，你需要做的就是和女朋友谈恋爱就可以。 3，依赖注入的几种方式？你一般选择用哪种注入？ 答：三种方式。setter方法注入、构造器注入、接口注入。 一般使用注解注入方式 4，spring 是如何管理bean的？ spring是通过容器来对bean进行管理。通常我们理解的容器有BeanFactory和ApplicationContext.BeanFactory使用了工厂模式，负责读取bean的配置文档，负责bean的加载,实例化，维护bean之间的依赖关系，负责bean的生命周期。ApplicationContext具有beanfactory的所有功能，同时还提供国际化支持，事件管理，AOP等，因此一般使用ApplicationContext。 spring管理bean的生命周期，先是实例化一个bean,然后使用IOC/DI将需要的对象进行依赖注入，然后进过一系列的调用与使用，最后如果bean不再被使用或者容器销毁则会调用destroy方法进行销毁，生命周期结束。 5，spring的常用注解： 答：@controller,@service,@Repository,@ComPonent 6,springMVC和struts的区别： 答： （1） springmvc的入口是个DispatcherServlet,前端控制器；struts的入口是一个监听器 （2）springmvc是基于方法的实现，传入方法的形参，可以设计为单例模式或者多例模式。struts是基于类的实现，参数为方法的属性。 （3）struts更符合OOP编程思想，springmvc更谨慎，在servlet上扩展。 （4）springmvc可以和spring可以认为是零配置，管理方面和安全方面较struts高。 7，为什么在项目中使用springmvc而不使用struts2？ 答：首先，springMVC是基于方法开发的，struts是基于类开发的； 其次，springMVC可以进行单例开发，struts只能进行多例开发； 最后，springMVC的速度比struts快。 8,说一下Mybatis和Hibernate的区别？ 答：1，mybatis是轻量级的半自动化框架；hibernate是轻量级的全自动框架； 2，使用hibernate开发时开发量要小一点，不用写sql语句，全自动生成；mybatis相对工作量要大，需要写大量的sql语句； 3，mybatis对于sql优化方面要比hibernate好，heibernate会查询出所有的字段，性能会有一点损耗；mybatis可以根据需求自己定制sql语句，实现sql优化。 4，hibernate数据库移植性很强，而mybatis对数据库的依赖性比较强，更换数据库一般需要修改sql语句。 9，sql优化。 答：1，对查询进行优化，避免权标扫描； 2，避免在where子句中对字段进行null判断； 3，避免在where子句中使用<>、！=等操作符; 4，少用in、not in； 5，避免使用like； 6，避免在where子句中进行表达式操作； 7，不要使用太多的索引； 8，不要使用select *，应尽力查询需要的字段。 10，mysql创建自增长列关键词：auto_increment 11，mysql查询前10条数据：select * from employee limit 0,10; 12，oracle三层分页关键词：rownum 13，将一张表数据复制到另一张表：create table sss as (select * from aaa) 14，hashmap和hashtable的区别： 答：hashmap与hasptable都完成了map接口。最主要的区别
相信这内连接，左连接什么的大家都比较熟悉了，当然还有左外连接什么的，基本用不上我就不贴出来了。这图只是让大家回忆一下，各种连接查询。 然后要告诉大家的是，需要根据查询的情况，想好使用哪种连接方式效率更高。
在生产环境中收到一个接口耗时预警, 通过监控发现, 接口耗时达到了89s, 最终定位到了是因为触发了一个sql慢查询场景.
hare是一个基于pymysql并运用 ActiveRecord 模式的 ORM 框架。 项目简介 hare是一个基于pymysql并运用ActiveRecord模式的ORM框架, 在虚拟环境下，通过： pip install hare 即可安装。 当前，它只支持： MySQL 动机 在Python下进行数据库操作， 大体有两种方法： 1、使用raw sql； 2、使用ORM； Raw SQL 使用raw sql的好处是： 给予开发人员极大的自由，让开发人员知道具体要执行的sql，方便sql优化
为更好的帮助DBA运维数据库，腾讯云将于每月开展DBbrain诊断日，腾讯云高级产品经理迪B哥直播解析经典数据库运维难题，结合腾讯云数据库智能管家DBbrain的能力，为大家提供问题优化思路和方法，玩转数据库！ 本期文章将聚焦于数据库智能管家DBbrain的最新功能“SQL优化”服务，为大家详细解读如何高效、高质的完成耗时又繁重的SQL优化工作，帮助业务持续稳定的运行，实现数据库“自治”。 1 多样的数据库优化手段 数据库（Database）一直以来都在业务系统中扮演着举足轻重的角色，大部分业务的稳定运
为更好的帮助DBA运维数据库，腾讯云将于每月12日开展DBbrain诊断日，腾讯云高级产品经理迪B哥为大家解析经典数据库运维难题，结合腾讯云数据库智能管家DBbrain的能力，为大家提供问题优化思路和方法，玩转数据库！
首先对于SQL优化的概念大家都会有一种潜意识的错觉，那就是创建索引，对于业务同学来说，就会产生一种不好的使用习惯，比如有一张数据表test,有5个字段,业务同学也不知道后续怎么去更好的使用，干脆建五个索引好了，毫无疑问，这是不建议的，我们希望SQL优化的内容能够尽可能从一个更加宏观的角度来看待，而不是仅仅从索引的角度去考虑。
通过「SHOW FULL PROCESSLIST」语句很容易就能查到问题SQL，如下：
| 作者 梁东阳，数据库研发中心数据库内核工程师，负责腾讯云MySQL的内核开发。 ---- 在日常运维中，相信不少人都收藏了很多关于查询优化的方法论和小技巧，但是仔细想想，你真的了解这些优化背后的原理吗？ 查询优化器是专门负责优化查询语句的优化器模块，通过计算分析收集的各种系统统计信息，为查询给出最优的执行计划——最优的数据检索方式。 MySQL的优化器主要是将SQL经过语法解析/词法解析后得到的语法树，通过MySQL的数据字典和统计信息的内容，经过一系列运算，从而得出一个执行计划树的构成。之后MySQ
上篇文章说了，mysql5.6.6版本之前数据默认在系统表空间，之后默认在独立表空间，innodb因为索引和数据在一个b+树，所以两个文件，一个文件结构，一个存数据，myISAM则是三个文件。一个聚簇索引有两个段，叶子段和非叶子段，一个段有他专属的区，数据刚开始存在碎片区，不属于任何段，直属表空间。
在MySQL中，执行计划是优化器根据查询语句生成的一种重要的数据结构，它描述了如何通过组合底层操作实现查询的逻辑。当我们编写一条SQL语句时，MySQL会自动对其进行优化，并生成最优的执行计划以实现更快的查询速度。
小编寄语：本系列分享的SQL优化实例，并不一定适用于所有相似SQL或所有场景。我们只是介绍一种方法，当你再次遇到类似SQL，可以根据真实场景，选择最适合的方案。另外，有疑问的时候，最好的办法就是测试，动手才能找到最佳答案！ SQL文本如下： SELECT NVL(SUM(SRE), 0) HRJE FROM MD3U.CARD_INCOME A WHERE YLGRZHH = '371081110630214389' AND DDQCSRH IS NULL AND ZDLSH IS NOT NUL
一，sql性能优化基础方法论 对于功能，我们可能知道必须改进什么；但对于性能问题，有时我们可能无从下手。其实，任何计算机应用系统最终队可以归结为： cpu消耗 内存使用 对磁盘，网络或其他I/O设备的
来自年初和最近朋友的大厂面试题。 阿里巴巴 对象如何进行深拷贝，除了clone happen-before原则 jvm调优的实践 单例对象会被jvm的gc时回收吗 redis如果list较大，怎么优化 tcp的沾包与半包 socket编程相关的一些api和用法 建立和处理连接的是同一个socket吗，socket中两个队列分别是啥 项目中有使用过netty吗 TSL1.3新特性 AES算法原理 redis集群的使用 mysql与mogo对比 场景题：设计一个im系统包括群聊单聊 场景题：设计数据库连接池 场
昨天，在发布了《Spring官宣承认网传大漏洞，并提供解决方案》之后。 群里(点击加群)就有几个小伙伴问了这样的问题：我们的Spring版本比较老，该怎么办？这是一个好问题，所以DD今天单独拿出来说说。 这次的RCE漏洞宣布之后，官方给出的主要解决方案是升级版本，但只有Spring 5.2、5.3和Spring Boot 2.5、2.6提供了对应的升级版本。 那么对于一些还在用Spring 5.0、5.1甚至Spring 4.x、或者Spring Boot 1.x和Spring 2.4及以下版本的用户该怎么
为了便于大家理解DBbrain的SQL优化功能的使用场景和设计背景，先简单聊一聊SQL性能较差与数据库性能联系——我们通常把性能较差的SQL称之为慢SQL，一般我们可通过设置slow_query_log参数设置为ON，来捕获执行时间超过一定数值（由long_query_time参数控制）的SQL语句。表现上来理解就是执行时间过长的SQL，但广义上消耗资源过多、执行计划不够优秀的SQL同样具有影响数据库性能的潜在隐患，可能只是因为资源足够空闲（紧急升配往往能够临时掩盖性能问题）或者数据量不够大，所以这几类SQL的执行时间并没有太长，但在特定场景下却会放大其对数据库性能的影响。而一般80%的数据库性能问题都是由于SQL性能所导致的，所以如何进行SQL的优化、SQL优化的效果就成为了数据库性能提升的关键因素。那么接下来就为大家揭秘，DBbrain的智能优化引擎是如何进行SQL优化的。
本文主要是对数据库查询优化器的一个综述，包括查询优化器分类、查询优化器执行过程和CBO框架Calcite。
最近在忙上海南京广州深圳为ACS客户做技术分享，没太多时间更新公众号。接下来我会把这次技术分享里面一些案例写在公众号。今天是第一篇。
从4到1，成本是逐渐增大的，因此数据库的优化上，SQL语句优化是很重要的一个方面。
性能问题是数据库中最重要也是最迫切要解决的问题之一，随着业务的发展和数据的不断加增，用户对于系统的响应速度的要求越来越高。而归根结底就是要提高数据库系统的性能。对于大部分的DBA来说，性能优化并不是一件容易的事情，造成性能问题的原因多种多样，在现实中，优化过程也会受到重重阻碍，随着云时代的到来以及自动化智能化运维的发展，那么云时代的DBA该如何优化数据库的性能呢？ 在今年的数据技术嘉年华上，我们邀请了来自国内外各大企业的性能优化专家，从不同的角度分析云时代数据库性能优化的技术与技巧。 重点嘉宾与主题抢先一
提示：公众号展示代码会自动折行，建议横屏阅读 「第一部分 查询优化器框架」 关系型数据库是一个通用系统软件，SQL作为一种结构化查询语言，用户不需要关注怎么做，只需要描述做什么，然后交由SQL引擎来处理。因为关系代数提供的等价性，同一个查询可以用不同的SQL语句描述。为防止用户所写的"不好的"SQL执行慢，这就需要查询优化器快速而准确地选择出一个效率较高的执行计划。 一般的查询优化器基于代价计算模型，包含SQL形态的变换，确定访问路径和多表连接顺序等几个重要的步骤。这些步骤被统一在一个优化器框架之内，相互
Synchronized（对象锁）和Static Synchronized（类锁）的区别
不知道你有没有这样一些困惑，面试的时候对于一个知识点总是答不好，给老板汇报的时候总是讲不好，晋升答辩的时候总是讲不清楚过去一年自己的贡献，撩妹的时候总是拿捏不到重点，咳咳。
工作两年有余，本人第一份工作是在一家外包公司，第二份工作是在一家做SAAS平台的公司，第一家公司让我入门，进入了软件开发的行业，了解了一些基础的东西；第二家公司由于规模不大，很多活儿都是一个人来做，从产品到开发、测试、运维我都了解了，对于整体的软件开发流程有了很大的了解。但是，为了自己的更好发展，决定去一家大公司，于5月初提出了离职，虽然领导挽留，但是我还是离职了，然后我自己面试了很多家公司，大公司小公司都有，积累了足够的经验，开始向阿里大公司投递简历，面了几家之后，终于拿到了自己满意的offer，我是在积累了足够的经验之后才提出离职的，离职时一件很重大的事情，自己要慎重考虑，要从职业发展和个人规划上考虑清楚再去做出选择。
我们常见的数据库性能优化就是SQL语句优化，确实SQL优化是开发者接触到最多的也是最常有的优化手段。作为开发人员我们接触最多的也就是SQL语句的优化，SQL语句的优化除了调整SQL语句外更多的是通过添加索引来加速查询，表结构(合理设计字段、拆分字段到其它表、分表等)的优化也是我们优化的主要手段。
在以MySQL为主要存储组件的业务系统中，MySQL的性能直接影响到应用的响应速度、用户体验和系统的可扩展性。因此，优化数据库的性能，特别是SQL查询的执行效率，成为了提升整个应用性能的关键环节。
在Oracle中，SPM（SQL Plan Management，SQL计划管理）是什么？
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
