JOIN
知识点掌握了,还需要不断练习才能熟练运用。下面golang学习网给大家带来一个数据库开发实战,手把手教大家学习《JOIN》,在实现功能的过程中也带大家重新温习相关知识点,温故而知新,回头看看说不定又有不一样的感悟!
现在有两张表,t1表100行,t2表1000行 select * from t1 straight_join t2 on (t1.a=t2.b);
Simple Nested-Loop Join(没有被MYSQL使用)
前提:join字段t2.b不存在索引
查询过程:全表扫描t1,然后将每一条记录a字段作为条件到被驱动表t2进行一次全表扫描,也就是100次全表扫描。
Block Nested-Loop Join(简称BNL)
前提:join字段t2.b不存在索引。
查询过程:全表扫描t1,将数据放入join buffer,再将被驱动表t2数据与join buffr里的t1数据进行批量对比。当t1表数据过多,join buffer存不下时,会将数据分段重复执行整个查询过程。
tips:所以某些场景下可以通过设置join_buffer_size增大join buffer提高join速度。
通过explain的Extra 字段有 Using join buffer(Block Nested Loop)。
Index Nested-Loop Join(简称NLJ)
前提:join字段t2.b存在索引。
查询过程:全表扫描t1,循环100次(将第一条记录a字段作为条件去被驱动表t2查询二级索引树,得到主键ID,再回表查询主键索引树)。
使用BKA优化查询过程:全表扫描t1,循环100次(将每一条记录a字段放入join buffer),将join buffer里的a字段作为条件去被驱动表t2范围查询二级索引树,得到主键ID,将主键ID放入read_rnd_buffer,递增排序后,范围查询主键索引树。
时间复杂度:100+1002log2^1000(先扫描驱动表100行,再循环100次扫描二级索引树得到主键ID,再"回表"扫描主键索引树1002log2^1000)。
tips:假设驱动表的行数是 N,被驱动表行数M,也就是N+N2log2^M。可以看出驱动表的行数N对结果影响更大,所以才有了小表驱动大表。
Multi-Range Read(针对回表的优化)
因为大多数的数据都是按照主键递增顺序插入得到的,所以我们可以认为,如果按照主键的递增顺序查询的话,对磁盘的读比较接近顺序读,能够提升读性能。
开启MRR优化 set optimizer_switch="mrr=on" 稳定使用MRR优化,按照官方文档的说法,是现在的优化器策略,判断消耗的时候, 会更倾向于不使用 MRR,把 mrr_cost_based 设置为 off,就是稳定使用 MRR 了 set optimizer_switch="mrr=on,mrr_cost_based=off"
所以回表会变为:根据二级索引树得到主键ID后存入read_rnd_buffer(read_rnd_buffer_size参数控制),进行递增排序,拿排序后的主键ID去主键索引树进行范围查询。(用上MRR,通过explain的Extra 字段有 Using MRR)
Batched Key Access(针对NLJ的优化,BKA依赖MRR)
开启BKA优化,前两个参数是为了开启MRR set optimizer_switch='mrr=on,mrr_cost_based=off,batched_key_access=on';
join_buffer 在 BNL 算法里的作用,是暂存驱动表的数据。但是在 NLJ 算法里并没有用。那么,刚好就可以复用 join_buffer 到 BKA 算法中。
在NLJ过程中,由于从驱动表 t1,一行行地取出 a 的值,再到被驱动表 t2 去做 join。也就是说,对于表 t2 来说,每次都是匹配一个值。这时,MRR 的优势就用不上了。所以可以将t1表的a字段放入join buffer,递增排序后,在t2的b字段索引树上进行范围查询,得到主键ID,再利用MRR优化进行后续回表。
hash join
由于join_buffer 里面维护的是一个无序数组,所以在和被驱动表join时就需要逐条匹配,如果通过hash结构去存储驱动表数据的话,就能大大减少等值判断次数。
存在where条件(小表驱动大表)
假设t1中100条c=100的数据 select * from t2 straight_join t1 on (t2.b=t1.a) where t2.id
这个时候需要选择t2作为驱动表,因为先根据where条件过滤后得到10行的结果集作为驱动表,再进行join,join的过程再对t1.c=100的条件过滤。
终于介绍完啦!小伙伴们,这篇关于《JOIN》的介绍应该让你收获多多了吧!欢迎大家收藏或分享给更多需要学习的朋友吧~golang学习网公众号也会发布数据库相关知识,快来关注吧!
代码简洁主义-----用一条SQL统计留存、LTV、付费留存
- 上一篇
- 代码简洁主义-----用一条SQL统计留存、LTV、付费留存
- 下一篇
- Ubuntu 安装MySQL8.0
-
- 畅快的毛巾
- 这篇技术贴太及时了,太全面了,受益颇多,mark,关注博主了!希望博主能多写数据库相关的文章。
- 2023-03-03 18:50:31
-
- 数据库 · MySQL | 6小时前 | MySQL · SQL查询 · ROW_NUMBER · mysql group by 分组查询 ROW_NUMBER
- MySQL 分组后怎么取每组最新一条记录
- 423浏览 收藏
-
- 数据库 · MySQL | 1天前 |
- MySQL 第几万页开始变慢:用稳定排序和游标条件替代深 OFFSET
- 405浏览 收藏
-
- 数据库 · MySQL | 1天前 |
- MySQL JSON 数组检索要不要建多值索引:从 MEMBER OF 到不能排序的边界
- 463浏览 收藏
-
- 数据库 · MySQL | 1天前 | MySQL · 连接管理 · 服务器配置 · max_connections MySQL 9.4 back_log 连接突发
- MySQL 9.4 为什么把 back_log 默认值提到 10000:连接突发时先看这条边界
- 488浏览 收藏
-
- 数据库 · MySQL | 2天前 | MySQL · InnoDB · server_memory · 内存配置 ·
- MySQL 9.4 的 server_memory 怎么用:限制默认内存估算,不是给 InnoDB 加缓存
- 215浏览 收藏
-
- 数据库 · MySQL | 5天前 |
- MySQL 8.4 隐藏索引怎么试:不删索引也能验证查询计划
- 133浏览 收藏
-
- 数据库 · MySQL | 5天前 |
- MySQL 分区表怎么处理跨分区唯一键:分区列约束与建表取舍
- 501浏览 收藏
-
- 数据库 · MySQL | 6天前 | MySQL · 数据库设计 · 索引优化 · mysql UUID_TO_BIN BIN_TO_UUID swap_flag 二进制UUID
- MySQL UUID_TO_BIN 如何保持时间有序:swap_flag 与 BIN_TO_UUID 还原边界
- 261浏览 收藏
-
- 数据库 · MySQL | 6天前 |
- MySQL 隐形列怎么兼容 SELECT *:INVISIBLE COLUMN 的灰度加字段方法
- 122浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- SuperCLUE
- SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
- 149次使用
-
- C-Eval
- 深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
- 75次使用
-
- ClickPrompt
- ClickPrompt是一款专为AI提示词编写者设计的开源在线工具,支持Stable Diffusion绘图、ChatGPT对话及GitHub Copilot代码辅助。提供Prompt自动生成、一键运行、社区分享及可视化优化功能,帮助用户高效获取精准AI输出。
- 39次使用
-
- PromptHero
- PromptHero是专业的AI提示词搜索引擎与优化平台,支持Stable Diffusion、Midjourney等主流模型。提供海量提示词库、分类搜索、在线课程及社区互动,助力用户高效生成高质量AI图像与文本。
- 23次使用
-
- Stable Diffusion Prompt Book
- 深入解析OpenArt推出的Stable Diffusion Prompt Book,这本免费的开源提示词指南涵盖从基础语法到高级技巧,提供风格化词库与参数建议,助您优化AI绘画生成效果。
- 25次使用
-
- MySQL 明明加了索引,为什么查询还是很慢?先查这 6 个点
- 2026-06-27 374浏览
-
- golang MySQL实现对数据库表存储获取操作示例
- 2022-12-22 499浏览
-
- golang 基于 mysql 简单实现分布式读写锁
- 2023-01-07 384浏览
-
- 详解如何利用GORM实现MySQL事务
- 2023-01-07 184浏览
-
- Go语言实现操作MySQL的基础知识总结
- 2023-01-23 265浏览

