李锋镝的博客

  • 首页
  • 时间轴
  • 说说
  • 读书观影
  • 系列
  • AI工具集
  • 论坛
  • 友圈
    • 友链
    • 朋友圈
    • 游客中心
  • 留言
    • 留言
    • 走心评论
  • 关于
    • 关于本站
    • Now
    • 每日心情
    • 网站地图
    • 网站统计
    • 赞助
  • 星球穿梭
  • 🚇开往
静亦定 动亦定
惟坚韧者始能遂其志
  1. 首页
  2. 中间件
  3. 正文

MySQL深度分页

2022年2月11日 182 1 0
本文最后更新于 2025年11月20日,距今已 339 天,其中的信息可能已经发生变化,请注意甄别。

背景

mysql分页查询是我们常见的需求,但是随着页数的增加查询性能会逐渐下降,尤其是到深度分页的情况。我们可以把分页分为两个步骤:

  1. 定位偏移量
  2. 获取分页条数的数据

所以当数据较大页数较深时就涉及一次需要耗费较长时间的操作。所以mysql深度分页的问题该如何解决呢?

首先我们来看一个简单的查询:

SELECT * FROM events WHERE date > '2010-01-01T00:00:00-00:00' AND event = 'editstart' ORDER BY date LIMIT 50000 50;

其大致的页数查询性能曲线如下:

页数查询性能曲线

可以发现在一定页数后时间延时非常明显。结合相关文章我们的解决方式可以大致分为以下几种.

思路

思路:既然分页查询时,定位偏移量较慢,我们可不可以减少这个偏移量的定位,使其始终在曲线的前半部分,即在较少偏移量的场景。

方法一:

以结果作为条件,已查询条件的变化换取分页的不变。

分页查询我们一般都是逐渐往后翻页的,那么我们可以很清晰的知道,在当前查询页的最后一条数据的时间点,那么,以此时间点再查询20条,那么 我们当前的页数就同样还是0,以时间点的推移换取页数的不变,减少其偏移量的计算。

我们可以创建索引 index(date,id), id就是我们上一次的返回结果。

具体示例如下:

SELECT * FROM events WHERE (date,id) > ('2010-07-12T10:29:47-07:00',111866) AND event = 'editstart' ORDER BY date, id LIMIT 50000 50;

局限性:

  1. id最好是主键,是否有这样自增长的字段,或者说带顺序变化特性的列。
  2. 无法适应下一次分页页数与上一次相差较大,如由第一页突然跳转到50万页。

优点:

可以适合复杂查询条件查询的场景。不需要改变sql语句结构。

方法二:

采用子查询模式。其原理依赖于覆盖索引,当查询的列均是索引字段时,性能较快,因为其只用遍历索引本身。我们自己创建的非主键索引,都是非聚集索引,其不包含非索引字段,所以数据结构较小,系统能快速遍历。我们知道索引是b+树结构,系统能很容易的知道866613位于索引树的位置。

##查询语句
select id from product limit 866613, 20;
##优化方式一
SELECT * FROM product WHERE ID > =(select id from product limit 866613, 1) limit 20;
##优化方式二
SELECT * FROM product a JOIN (select id from product limit 866613, 20) b ON a.ID = b.id;

局限性:

  1. 依赖于主键的自增长特性。
  2. 不适合复杂查询条件的分页逻辑,复杂查询条件很难做到,索引包含全部查询字段,容易漏掉部分数据。

方法三:

复合索引:其原理同样是索引覆盖的思想,只不过是其以查询条件的一份作为索引,最终的索引字段是主键id。这种场景严格依赖于索引的顺序。查询的结果也不能包含非索引字段,需再走一次子查询。

最后

关于深度分页:

针对复杂的查询逻辑,一般从数据的偏移量着手,减少偏移量的定位时间。

简单的查询逻辑,可以从索引覆盖的思想着手,先确定查询数据的主键id,再由id找相关的数据,索引能解决的就不要加给业务逻辑了。

本作品采用 知识共享署名-非商业性使用-相同方式共享 4.0 国际许可协议 进行许可
分享到

MySQL深度分页

也可使用浏览器菜单中的「分享」功能

微信扫一扫分享

标签: MySQL SQL 深度分页
最后更新:2025年11月20日

岁月同一天 10 月 25 日

回望过去的今天,你在写什么

  • 7 年前 2019年10月25日
    JAVA简单快速的读写Excel之EasyExcel

    简介 EasyExcel是一个基于Java的简单、省内存的读写Excel的开源项目。在尽可能节约内存的情况下支持读写百M…

  • 原创
    7 年前 2019年10月25日
    CentOS安装docker

    安装依赖包: $ sudo yum install -y yum-utils \ device-mapper-persi…

相关文章
  • Navicat Premium数据库账号密码解密2021年9月14日
  • 数据库事务的隔离级别2021年6月2日
  • MySQL 同步 ElasticSearch 深度指南——6 种方案的原理、实战与避坑2025年10月30日
  • MySQL分页排序时数据重复问题(MySQL优先队列)2021年5月29日
  • Python3 操作 MySQL 插入一条数据并返回主键 id2021年1月15日

李锋镝

既然选择了远方,便只顾风雨兼程。

打赏 点赞
< 上一篇
下一篇 >
1234567891112131415161718192021222324252627282930313233343536373839404142434446474849505152535455575859606162636465666769727476777879808182858687909293949596979899
取消回复
…

文章评论

还没有评论,快来抢沙发吧~

昨夜雨疏风骤,浓睡不消残酒。试问卷帘人,却道海棠依旧。知否,知否?应是绿肥红瘦。

听点儿音乐吧 朋友~
文章目录
最新 热点 随机
最新 热点 随机
NGINX严重漏洞(CVE-2026-15176、CVE-2026-93479、CVE-2026-97205) Kratos-plus v1.1.27更新说明 php2shell远程执行漏洞修复(CVE-2026-109618 和 CVE-2026-109619) 聊一聊DeepSeek开放自研搜索API这事 Let's Encrypt宣布证书缩短至64天,手动时代彻底终结! Markdown 的前世今生
给主题增加了游客中心功能心气没了,干什么都不得劲我觉得是时候公布我的导航网站了游本昌去世关于主题加载速度优化的一点儿小演进给主题增加了Now、每日心情、年度回顾、岁月同一天、随机漫步等功能
AI“说谎”“编造事实”的原因详解 解决MacBookPro-M4启动SpringCloud Gateway,首次访问巨慢问题 忽然发现,在校大学生可以免费领一年有道云笔记会员~ 终于有人把Elasticsearch原理讲透了! 英伟达 H100 是啥,到底好在哪? 网站升级到http/2
最近评论
李锋镝 发布于 7 小时前(10月25日) 好主意,等我有时间了拆分一下
老张博客 发布于 1 天前(10月24日) 可以把这个功能做成插件 我的那个主题也集成了很多功能,我现在想把他们都分出去做成插件。这样以后换主...
李锋镝 发布于 2 天前(10月23日) 哈哈哈,确实,经常有些网站证书过期的
李锋镝 发布于 2 天前(10月23日) 这样更省事
fairy 发布于 2 天前(10月23日) 我挺支持这个的,自己的站,还是要看看的。证书过期都不知道,还不如关站算了。
标签聚合
WordPress K8s JVM Theme 架构 JAVA 日常 Spring MySQL 多线程 数据库 AI编程 分布式 SQL Claude IDEA Redis AI SpringBoot ElasticSearch
友情链接
  • 林羽凡
  • 搬砖日记
  • 刘永博客
  • Mr.Sun的博客
  • 彬红茶日记
  • lijie blog
  • 九仞之行
  • 懋和道人
  • 老张博客
  • 韩小韩博客
  • 知向前端
  • Honesty
  • 志文工作室
  • 瓦匠个人小站
  • sssr7844的博客
  • 哥斯拉
  • 韩情脉脉
  • 皮皮社
  • Serendipity

COPYRIGHT © 2016-2026 lifengdi.com. ALL RIGHTS RESERVED.

lifengdi.com 十年之约虫洞

Domain age badge for lifengdi.com

Theme Kratos-plus By Dylan Li

津ICP备2024022503号-3

京公网安备11011502039375号