首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

浅谈MySQL分页查询

MySQL系列文章到目前已经更新十几篇,从数据类型谈到了备份恢复再到主从同步分库分表,从本篇开始,会花几篇重点谈谈MySQL基础部分,而本篇我们重点来讲讲我们日常开发中最常见的一种查询分页查询。...在一个系统中每次查询都扫描几十万行数据,肯定性能大打折扣,因为前面900000行数据对我们来说是无效数据,所以我们首先可以先使用子查询来优化,先使用子查询实现覆盖索引查询返回主键id,再使用主键id和原表做一个关联操作...,可以减少回表次数并且减少Mysql扫描那些无效的行数: ?...因为我们数据表有20多个字段,我们子查询使用select id效率在大数据的情况下大概是select *的3倍性能,而且id是主键可以利用索引优化查询速度,然后外层的查询利用id也可以使用索引加快查询效率...,所以显而易见使用子查询进行分页效率比直接使用limit分页效率高很多。

3.7K20

MySQL(联合查询、子查询分页查询

目录 联合查询查询 分页查询 联合查询 联合查询是指将多个查询结果合并成一个结果集(二维表),通常出现在统计分析中。 语法: 查询语句1 UNION 查询语句2 UNION ......有返回结果,执行select* from b_user; select * from b_order where order_id>10没有返回结果,执行select* from b_user; 返回空 分页查询...如果数据量过大(100亿),如果一次性显示10亿条数据,(100亿条数据本身从数据库中读取时慢【分库 分表】,将100亿条新闻展示在网页的过程也是很慢的) 手工分页 百度新闻、微商城、淘宝这些根据滚动条的位置来刷新数据...滚动条分页 基础语法: SELECT 查询字段列表 FROM 表名 WHERE 筛选条件 GROUP BY 分组列表 HAVING 筛选条件 ORDER BY 排序列表 LIMIT offset...; 如果offset为0 SELECT * FROM b_user LIMIT 2; 注意: 在SQL Server中使用top关键字进行分页;所谓top 7,代表查询前7条记录。

16.3K20

性能优化之分页查询

一 背景 大部分开发和DBA同行都对分页查询非常非常了解,看帖子翻页需要分页查询,搜索商品也需要分页查询。...本文讲讲个人的优化分页查询的经验,抛砖引玉。...对于此类操作,取前面少数几行数据会很快,但是扫描的记录数越多,SQL的性能就会越差,因为N越大,MySQL需要扫描越多的数据来定位到具体的N行,这样耗费大量的IO 成本和时间成本。...鉴于上面的大分页查询耗费时间长的原因,我们思考一个问题,是否需要完全遍历“无效的数据”?...通过上面的原理分析,我们知道通过常规方式进行大分页查询慢的原因,也知道了提高大分页查询的具体方法 ,下面我们讨论一下在线上业务系统中常用的解决方法。

97940

使用MySQL实现分页查询

使用MySQL实现分页查询 本文关键字:MySQL分页查询、真分页、假分页、LIMIT 在项目开发当中,经常要实现分页功能,在面试时也会经常被问到,什么是分页。...真分页分页指的是每次在进行翻页时都只查询出当前页面的数据,特点就是与数据库的交互次数较多,但是每次查询的数据量较少,数据也不需要一直保存在内存中。...缓存层 真分页和假分页都要和数据库进行交互,对于真分页来说不需要担心数据同步的问题,因为每次都是查询出最新的,但是数据库的负担会很重,尤其是用户量大的情况下。...在对数据库中的数据进行修改后,要将变更后的数据及时同步到缓存层,在进行数据查询时从缓存层获取。 ? 二、MySQL实现分页 本文将介绍如何通过真分页的方式,每次取出所需数据。...对于不同的数据,实现分页有不同的方式,在MySQL中可以使用LIMIT来限制查询出的数据。 1. LIMIT用法 LIMIT出现在查询语句的最后,可以使用一个参数或两个参数来限制取出的数据。

16.9K52

高级查询(化繁为简、分页提升性能

高级分页 两个例子都出现了一个PageParameter参数page,这是分页参数,包含分页查询以及排序所需要的数据。 ?...MySql/SQLite/PostgreSQL 能够很好支持,只需要在 sql 后加上 limit start, maxNums 即可; Oracle/SqlServer/Access/SqlCe 则要麻烦一次...,其中SqlServer最复杂,不同版本的分页方法还不同,早期版本还要求有主键字段; 因此,sql 必须是简单的单表查询语句,PageSplit 才能把任意查询拆开并转换为分页查询。...大表分页优化 大表分页查询,开头会很快,越是往后越慢!...扩展属性固然可以解决关联多表字段的问题,并且借助缓存性能还不错,但是需要同时在两张表上设置条件的时候,就行不通了。

1.2K20

MySQL——优化嵌套查询分页查询

,是因为MySQL不需要在内存中创建临时表来完成这个逻辑上需要两个步骤的查询工作;并且Not exists表示MYSQL优化了LEFT JOIN,一旦它找到了匹配LEFT JOIN标准的行, 就不再搜索了...优化分页查询MySQL中做分页查询MySQL 并不是跳过 offset 行,而是取 offset+N 行,然后返回放弃前 offset 行,返回 N 行,那当 offset 特别大的时候,效率就非常的低下...例如“limit 1000,20”,此时MySQL排序出前1020条数据后仅仅需要第1001到1020条记录,前1000条数据都会被抛弃,查询和排序的代价非常高。...由此可见MySQL分页处理并不是十分完美,需要我们在分页SQL上做一些优化,要么控制返回的总页数,要么对超过特定阈值的页数进行 SQL 改写。...总结 对于嵌套查询分页查询的优化,归根结底就是遵循SQL优化原则之一——减少回表查询的I/O次数。对于分页查询优化,更建议使用第一种优化方案,性能更好,稳定性更高。 参考 《深入浅出MySQL

2.9K21

oracle、mysql 分页查询比较

1、 Oracle的分页查询语句 分页查询格式: SELECT * FROM ( SELECT A.*, ROWNUM RN FROM (SELECT * FROM TABLE_NAME) A WHERE...ROWNUM = 21控制分页查询的每页的范围。 上面给出的这个分页查询语句,在大多数情况拥有较高的效率。分页的目的就是控制输出结果集大小,将结果尽快的返回。...那么在大部分的情况下,对于分页查询选择NESTED LOOP作为查询的连接方法具有较高的效率(分页查询的时候绝大部分的情况是查询前几页的数据,越靠后面的页数访问几率越小)。...* FROM TABLE_NAME) A WHERE ROWNUM <= 40 ) WHERE RN >= 21 2、 MySQL分页查询语句 在PhpMyAdmin里执行如下SQL: SELECT...1000000 , 1(6.7732 秒) SELECT pid FROM `cdb_posts` ORDER BY pid LIMIT 1000000 , 1(0.5838 秒) 有网友说如果是MySQL

2.7K90

使用MySQL实现分页查询

使用MySQL实现分页查询 本文关键字:MySQL分页查询、真分页、假分页、LIMIT 文章目录 使用MySQL实现分页查询 一、分页 1. 什么是分页 2. 真分页 3. 假分页 4....缓存层 二、MySQL实现分页 1. LIMIT用法 2. 分页公式 在项目开发当中,经常要实现分页功能,在面试时也会经常被问到:什么是分页。...真分页分页指的是每次在进行翻页时都只查询出当前页面的数据,特点就是与数据库的交互次数较多,但是每次查询的数据量较少,数据也不需要一直保存在内存中。...在对数据库中的数据进行修改后,要将变更后的数据及时同步到缓存层,在进行数据查询时从缓存层获取。 二、MySQL实现分页 本文将介绍如何通过真分页的方式,每次取出所需数据。...对于不同的数据,实现分页有不同的方式,在MySQL中可以使用LIMIT来限制查询出的数据。 1. LIMIT用法 LIMIT出现在查询语句的最后,可以使用一个参数或两个参数来限制取出的数据。

2.4K30

oracle、mysql 分页查询比较

1、 Oracle的分页查询语句 分页查询格式: SELECT * FROM ( SELECT A.*, ROWNUM RN FROM (SELECT * FROM TABLE_NAME) A WHERE...ROWNUM = 21控制分页查询的每页的范围。 上面给出的这个分页查询语句,在大多数情况拥有较高的效率。分页的目的就是控制输出结果集大小,将结果尽快的返回。...那么在大部分的情况下,对于分页查询选择NESTED LOOP作为查询的连接方法具有较高的效率(分页查询的时候绝大部分的情况是查询前几页的数据,越靠后面的页数访问几率越小)。...* FROM TABLE_NAME) A WHERE ROWNUM <= 40 ) WHERE RN >= 21 2、 MySQL分页查询语句 在PhpMyAdmin里执行如下SQL: SELECT...1000000 , 1(6.7732 秒) SELECT pid FROM `cdb_posts` ORDER BY pid LIMIT 1000000 , 1(0.5838 秒) 有网友说如果是MySQL

2.6K80

mysql的sql分页查询语句怎么写_sql 分页查询语句(mysql分页语句)「建议收藏」

sql 分页查询语句(mysql分页语句) 2020-07-24 11:18:53 共10个回答 intpageCount=15(每页显示的行数)intTotalCount=30(页数*每页显示的行数)...,以上是分页的SQL语句.....分页:一般会把当前页通过get方式传递,PHP通过$_GET[‘page’]接收.查询:可以从当前乘以每页显示数通过limit来实现分页效果....*,’2’asnumfromtwherereadcount>10))orderbynum,weight把前5个加上标签1,后10个加上标签2,最后按照标签排序就ok了 四种方式实现SQLServer分页查询...*,ROWNUMRNFROM(SELECT*FROMTABLE_Oracle的分页查询语句基本上可以按照本文给出的格式来进行套用.分页查询格式: 你说的应该是利用SQL的游标存储过程来分页的形式代码如下

13.5K20

mysql查询优化-分页查询

前提介绍 为何分页查询在测试环境没事,在生产上几千万的数据就出现了问题 在平时开发时,由于数据量没有那么大,所以测试有时候会不到位,比如用到的分页查询,使用不规范时,数据量越大,查询越慢,而且有 长时间进程不结束...,会导致内存不足等风险 传统分页查询:SELECT c1,c2,cn… FROM table LIMIT n,m MySQL的limit工作原理就是先读取前面n条记录,然后抛弃前n条,读后面m条想要的,...所以n越大,偏移量越大,性能就越差。...因为要取出所有字段内容,这种需要跨越大量数据块并取出 推荐分页查询方法 通过直接根据索引字段定位后,才取出相应内容,效率自然大大提升。...id from product limit 866613, 20) b ON a.ID = b.id 3、高性能MySQL一书中提到的只读索引方法 优化前SQL: SELECT c1,c2,cn… FROM

3K20

MySQL分页性能优化指南

一道面试的问题,当MySQL表中有数据量很大的时候如何做分页。。。。当时只知道在数据量很大的时候可以分表,但不知道不分表时可以怎么做。。。。...很多应用往往只展示最新或最热门的几条记录,但为了旧记录仍然可访问,所以就需要个分页的导航栏。然而,如何通过MySQL更好的实现分页,始终是比较令人头疼的问题。...虽然没有拿来就能用的解决办法,但了解数据库的底层或多或少有助于优化分页查询。 我们先从一个常用但性能很差的查询来看一看。...但是在大多数情况下,查询语句简短并不意味着性能的提高。不幸的是,这种分页查询方式在许多主流框架中都有用到,下面看看这个语句的查询性能。...上面已经说过了,大的偏移量会影响性能,所以我们要重写查询语句。为了演示,我们创建一个新的表“news”,按照时事性排序(最新发布的在最前面),实现一个高性能分页

1.1K80
领券