当前位置:首页 > 文章列表 > 数据库 > MySQL > MySQL 深分页优化实战:用延迟关联减少无效扫描

MySQL 深分页优化实战:用延迟关联减少无效扫描

来源:17golang原创 2026-06-13 05:45:22 0浏览 收藏

后台订单列表、日志列表、流水明细这类页面,经常会遇到一个现象:第一页很快,第 1000 页开始明显变慢,越往后越卡。很多同学第一反应是“加索引”,但深分页的问题往往不是完全没索引,而是数据库扫描并丢弃了太多无用行。

本文用一个订单列表场景,演示如何把普通的 LIMIT offset,size 改造成“覆盖索引先定位主键,再回表取详情”的延迟关联方案。它不神秘,但在大表后台列表里很实用。

摘要

本文会完成四件事:复现深分页变慢的原因、设计适合排序条件的联合索引、用延迟关联改写 SQL、给出游标式分页的替代方案。适合正在维护 MySQL 列表查询、管理后台、订单流水和日志检索的开发者阅读。

适合人群

  • 能写基本 SQL,但列表页越翻越慢的后端同学。
  • 正在做订单、账单、日志、工单等大表分页查询的开发者。
  • 想理解覆盖索引、回表、延迟关联之间关系的 MySQL 使用者。

目录

  • 为什么深分页会越来越慢
  • 先把排序条件变成可用索引
  • 延迟关联:先拿主键,再取完整行
  • 什么时候改成游标式分页
  • 上线前检查清单

为什么深分页会越来越慢

假设后台订单表按创建时间倒序分页,SQL 可能是这样:

SELECT id, order_no, user_id, amount, status, created_at
FROM orders
WHERE status = 1
ORDER BY created_at DESC, id DESC
LIMIT 50000, 20;

这条 SQL 的意思是:找到符合条件并排好序的结果,跳过前 50000 条,再返回 20 条。问题就出在“跳过”上。即使最后只返回 20 行,数据库也可能需要沿着索引读过大量记录,甚至回表取出很多最终会被丢弃的数据。

MySQL 深分页无效扫描示意:大偏移分页先扫描大量索引记录并丢弃,最终只返回少量行

当偏移量越来越大,扫描和丢弃的成本也越来越高。列表页看起来只是“翻页”,数据库实际做的是“从头数到目标位置”。

先把排序条件变成可用索引

优化前先确认过滤条件和排序条件是否能共用一个联合索引。以上面的订单查询为例,常见索引可以这样设计:

ALTER TABLE orders
ADD INDEX idx_status_created_id (status, created_at, id);

这个索引把 status 放在前面用于过滤,把 created_atid 放在后面用于稳定排序。这里的 id 很重要:当多个订单创建时间相同,继续用 id 排序可以避免翻页时出现重复或漏行。

可以用下面的方式观察访问路径:

EXPLAIN
SELECT id, order_no, user_id, amount, status, created_at
FROM orders
WHERE status = 1
ORDER BY created_at DESC, id DESC
LIMIT 50000, 20;

如果看到结果需要额外排序,或者扫描行数远大于返回行数,就要继续收缩扫描范围。

延迟关联:先拿主键,再取完整行

延迟关联的核心思路是:第一次查询只在覆盖索引里拿到目标页的主键,第二次再按主键回表取完整字段。这样可以减少“扫描了很多行,还反复回表取宽字段”的浪费。

SELECT o.id, o.order_no, o.user_id, o.amount, o.status, o.created_at
FROM orders AS o
JOIN (
    SELECT id
    FROM orders
    WHERE status = 1
    ORDER BY created_at DESC, id DESC
    LIMIT 50000, 20
) AS page_ids ON page_ids.id = o.id
ORDER BY o.created_at DESC, o.id DESC;

内层查询只读取联合索引里的字段,先确定这页需要的 20 个 id。外层再根据这 20 个 id 回表,读取订单号、金额、用户等详情字段。对于字段很多、行记录较宽的大表,这种改写通常更稳。

MySQL 深分页延迟关联流程:覆盖索引先定位目标页主键,再回表读取完整订单行并返回页面

为什么叫延迟关联

因为它把“拿完整行”的动作延后了。先用轻量索引完成定位,再用少量主键取详情。它不能让大偏移完全消失,但能把大量无意义的回表成本降下来。

注意排序一致性

内层和外层排序字段要保持一致,尤其是有相同创建时间时,要带上 id 作为稳定排序字段。否则页面顺序可能在两次查询之间发生轻微变化。

什么时候改成游标式分页

如果产品不要求跳到任意页,只需要“下一页、上一页、加载更多”,游标式分页会更适合。它不再传第几页,而是传上一页最后一条记录的位置。

SELECT id, order_no, user_id, amount, status, created_at
FROM orders
WHERE status = 1
  AND (created_at, id) 

这种写法让数据库从上次结束位置继续往后读,不需要从第一页一路数到第 50000 行。对于消息流、日志流、订单流水,游标式分页通常比深分页更稳定。

上线前检查清单

  • 确认联合索引顺序。 过滤字段在前,排序字段紧跟其后,不要只给单列随手建索引。
  • 确认返回字段宽度。 如果列表页不展示大字段,就不要把详情、备注、长文本一起查出来。
  • 确认排序稳定。 时间字段可能重复,建议加唯一字段作为第二排序条件。
  • 确认最大页限制。 管理后台可以限制最多翻到某个页数,超出后引导使用筛选条件。
  • 确认慢查询日志。 上线后观察扫描行数、响应时间和高频查询条件,避免只在测试数据上判断。

常见坑

  • 只改 SQL,不改索引。 延迟关联依赖内层查询能走覆盖索引,否则效果有限。
  • 忽略业务筛选。 如果用户经常按时间范围、状态、店铺筛选,索引要围绕真实查询条件设计。
  • 把所有分页都改成深分页优化。 小表、小偏移不一定需要复杂改写,先看数据量和慢查询证据。
  • 让用户无限跳页。 真正的大数据浏览更适合搜索、筛选和游标式加载,而不是翻到第几万页。

总结

MySQL 深分页慢,本质上是大偏移带来的无效扫描和无意义回表。优化路径可以分三步:先让过滤和排序走上联合索引,再用延迟关联减少宽行回表,最后在适合的业务场景下改成游标式分页。这样处理后,列表查询的压力会更可控,也更容易解释每一步优化为什么有效。

版本声明
本文转载于:17golang原创 如有侵犯,请联系study_golang@163.com删除
AI 知识库分块实战:按标题层级切文档,减少回答跑偏AI 知识库分块实战:按标题层级切文档,减少回答跑偏
上一篇
AI 知识库分块实战:按标题层级切文档,减少回答跑偏
Python CSV 批量导入实战:分批校验、错误行回写和事务提交
下一篇
Python CSV 批量导入实战:分批校验、错误行回写和事务提交
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ChatExcel酷表:告别Excel难题,北大团队AI助手助您轻松处理数据
    ChatExcel酷表
    ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
    8022次使用
  • Any绘本:开源免费AI绘本创作工具深度解析
    Any绘本
    探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
    8455次使用
  • 可赞AI:AI驱动办公可视化智能工具,一键高效生成文档图表脑图
    可赞AI
    可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
    8273次使用
  • 星月写作:AI网文创作神器,助力爆款小说速成
    星月写作
    星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
    10180次使用
  • MagicLight.ai:叙事驱动AI动画视频创作平台 | 高效生成专业级故事动画
    MagicLight
    MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
    9053次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码