当前位置:首页 > 文章列表 > 数据库 > MySQL > MySQL 8.4 内部临时表实战:GROUP BY 一慢就先查 TempTable 有没有落盘

MySQL 8.4 内部临时表实战:GROUP BY 一慢就先查 TempTable 有没有落盘

来源:17golang 原创 2026-06-08 19:02:06 0浏览 收藏

慢查询里最容易被低估的一类,是 GROUP BYORDER BYDISTINCT 触发的内部临时表。业务看到的是“报表接口突然从 300ms 到 8s”,DBA 看到的是磁盘 I/O 抖动、Created_tmp_disk_tables 增长、执行计划里出现 Using temporary。这类问题别先调大参数,先确认 SQL 为什么要造临时表。

本文面向 MySQL 8.4。官方文档里内部临时表由 TempTable 等机制承载,超过内存限制或遇到不适合内存承载的场景会落盘。工程上要把它当成执行计划问题、内存容量问题和 SQL 设计问题的交叉点来处理。

MySQL 内部临时表排障脑图
先确认触发语句和落盘原因,再决定改 SQL、补索引还是调参数。

一、业务场景:报表 SQL 把临时表打到磁盘

典型表结构如下,订单表有租户、状态、创建时间几个常用维度:

CREATE TABLE orders (
  id BIGINT UNSIGNED NOT NULL AUTO_INCREMENT,
  tenant_id BIGINT NOT NULL,
  status TINYINT NOT NULL,
  amount DECIMAL(12,2) NOT NULL,
  created_at DATETIME NOT NULL,
  PRIMARY KEY (id),
  KEY idx_created_at (created_at),
  KEY idx_tenant_status_created (tenant_id, status, created_at)
) ENGINE=InnoDB;

SELECT tenant_id, COUNT(*) AS cnt, SUM(amount) AS total_amount
FROM orders
WHERE created_at >= '2026-06-01'
GROUP BY tenant_id
ORDER BY cnt DESC
LIMIT 20;

这个 SQL 看起来简单,但它需要过滤、聚合、排序。只靠 created_at 索引能过滤时间,却不一定能顺便完成 GROUP BY tenant_idORDER BY cnt。结果集一大,内部临时表就可能从内存走到磁盘。

二、先抓证据:不要凭 Using temporary 一票否决

Using temporary 不是原罪。小临时表在内存里完成,可能完全可以接受。真正要警惕的是磁盘临时表持续增长、查询 P99 抖动、临时目录空间被吃掉。

EXPLAIN FORMAT=TREE
SELECT tenant_id, COUNT(*) AS cnt, SUM(amount) AS total_amount
FROM orders
WHERE created_at >= '2026-06-01'
GROUP BY tenant_id
ORDER BY cnt DESC
LIMIT 20;

SHOW GLOBAL STATUS LIKE 'Created_tmp%';
SHOW VARIABLES LIKE 'tmp_table_size';
SHOW VARIABLES LIKE 'temptable_max_ram';

排查时我会记录执行前后的状态量差值,而不是只看全局累计值。否则高峰期别的 SQL 也在造临时表,你会把锅扣错。

MySQL 临时表治理流程
执行计划、状态量、SQL 形态要一起看,避免只调参数。

三、踩坑原因:行太宽、结果太大、排序无法走索引

内部临时表落盘通常不是单点原因。常见触发点有三类:

  • 聚合结果太大:按高基数字段分组,例如用户、设备、订单号。
  • 临时表行太宽:SELECT 带了大字段,或者聚合前保留了不必要列。
  • 排序无法复用索引:按表达式、聚合结果或不同方向排序。

尤其是报表 SQL,开发经常先 SELECT * 写通逻辑,再补 GROUP BY。这会把临时表行宽放大,后面再怎么调参数都很被动。

四、SQL 改写:先缩小输入,再聚合排序

如果业务只要最近一个月活跃租户,可以先把过滤条件和必要列收窄:

SELECT tenant_id, COUNT(*) AS cnt, SUM(amount) AS total_amount
FROM (
  SELECT tenant_id, amount
  FROM orders FORCE INDEX (idx_created_at)
  WHERE created_at >= '2026-06-01'
    AND status IN (1, 2, 3)
) AS x
GROUP BY tenant_id
ORDER BY cnt DESC
LIMIT 20;

这不是说所有子查询都会更快,而是强调一个原则:让进入聚合的数据更少、行更窄。对高频报表,最好进一步做日维度汇总表,不要每次从明细表实时扫。

MySQL TempTable 排查 SQL 和上线检查
现场排障要保留 SQL、计划和状态量差值,方便复盘。

五、索引策略:不是所有 GROUP BY 都能靠一个索引解决

如果查询形态固定,比如按租户和状态过滤,再按时间范围统计,索引可以这样评估:

ALTER TABLE orders
  ADD INDEX idx_status_created_tenant (status, created_at, tenant_id);

ORDER BY cnt DESC 这种按聚合结果排序,通常仍需要临时结果集。索引能减少扫描和分组输入,不一定能消灭临时表。判断标准是执行计划和实际耗时,不是“有没有 Using temporary”。

六、参数只做兜底:别把内存开成事故源

MySQL 8.4 里和内部临时表相关的变量包括 tmp_table_sizemax_heap_table_sizetemptable_max_ram 等。调大它们可以减少一部分落盘,但风险是并发查询同时申请内存,实例内存压力被放大。

-- 示例:先在压测环境验证,不要直接照抄到生产
SET PERSIST tmp_table_size = 268435456;
SET PERSIST max_heap_table_size = 268435456;
SET PERSIST temptable_max_ram = 1073741824;

我通常要求参数变更必须带并发压测报告:同时跑报表查询、在线查询和写入,观察 MySQL 进程 RSS、磁盘 I/O、P99 和 OOM 风险。

七、上线检查单

  • 慢 SQL 样本必须保留 EXPLAIN FORMAT=TREE 和执行耗时。
  • 记录执行前后 Created_tmp_tablesCreated_tmp_disk_tables 差值。
  • 确认是否能通过过滤前置、减少列、汇总表降低临时表体积。
  • 新增索引前评估写入成本和重复索引。
  • 参数变更必须压测并设置回滚阈值。

八、我的结论

内部临时表不是坏东西,它是优化器完成复杂 SQL 的工作台。真正的问题是工作台太大,或者工作台被搬到了磁盘上。生产治理顺序很明确:先看计划和状态量,再改 SQL 和索引,最后才是参数兜底。只要顺序对,GROUP BY 慢查询通常不会变成一场玄学排障。

版本声明
本文转载于:17golang 原创 如有侵犯,请联系study_golang@163.com删除
Python 内存泄漏排查实战:用 tracemalloc 找到失控引用Python 内存泄漏排查实战:用 tracemalloc 找到失控引用
上一篇
Python 内存泄漏排查实战:用 tracemalloc 找到失控引用
Python Celery 5.4 实战:任务重试前先把幂等做好
下一篇
Python Celery 5.4 实战:任务重试前先把幂等做好
查看更多
最新文章
查看更多
课程推荐
  • 前端进阶之JavaScript设计模式
    前端进阶之JavaScript设计模式
    设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
    543次学习
  • GO语言核心编程课程
    GO语言核心编程课程
    本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
    516次学习
  • 简单聊聊mysql8与网络通信
    简单聊聊mysql8与网络通信
    如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
    500次学习
  • JavaScript正则表达式基础与实战
    JavaScript正则表达式基础与实战
    在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
    487次学习
  • 从零制作响应式网站—Grid布局
    从零制作响应式网站—Grid布局
    本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
    485次学习
查看更多
AI推荐
  • ChatExcel酷表:告别Excel难题,北大团队AI助手助您轻松处理数据
    ChatExcel酷表
    ChatExcel酷表是由北京大学团队打造的Excel聊天机器人,用自然语言操控表格,简化数据处理,告别繁琐操作,提升工作效率!适用于学生、上班族及政府人员。
    6928次使用
  • Any绘本:开源免费AI绘本创作工具深度解析
    Any绘本
    探索Any绘本(anypicturebook.com/zh),一款开源免费的AI绘本创作工具,基于Google Gemini与Flux AI模型,让您轻松创作个性化绘本。适用于家庭、教育、创作等多种场景,零门槛,高自由度,技术透明,本地可控。
    7340次使用
  • 可赞AI:AI驱动办公可视化智能工具,一键高效生成文档图表脑图
    可赞AI
    可赞AI,AI驱动的办公可视化智能工具,助您轻松实现文本与可视化元素高效转化。无论是智能文档生成、多格式文本解析,还是一键生成专业图表、脑图、知识卡片,可赞AI都能让信息处理更清晰高效。覆盖数据汇报、会议纪要、内容营销等全场景,大幅提升办公效率,降低专业门槛,是您提升工作效率的得力助手。
    7153次使用
  • 星月写作:AI网文创作神器,助力爆款小说速成
    星月写作
    星月写作是国内首款聚焦中文网络小说创作的AI辅助工具,解决网文作者从构思到变现的全流程痛点。AI扫榜、专属模板、全链路适配,助力新人快速上手,资深作者效率倍增。
    9084次使用
  • MagicLight.ai:叙事驱动AI动画视频创作平台 | 高效生成专业级故事动画
    MagicLight
    MagicLight.ai是全球首款叙事驱动型AI动画视频创作平台,专注于解决从故事想法到完整动画的全流程痛点。它通过自研AI模型,保障角色、风格、场景高度一致性,让零动画经验者也能高效产出专业级叙事内容。广泛适用于独立创作者、动画工作室、教育机构及企业营销,助您轻松实现创意落地与商业化。
    7812次使用
微信登录更方便
  • 密码登录
  • 注册账号
登录即同意 用户协议隐私政策
返回登录
  • 重置密码