技术分享 | MySQL 组复制数据一致性管理解析
大家好,今天本人给大家带来文章《技术分享 | MySQL 组复制数据一致性管理解析》,文中内容主要涉及到MySQL,如果你对数据库方面的知识点感兴趣,那就请各位朋友继续看下去吧~希望能真正帮到你们,谢谢!
作者:杨涛涛
资深数据库专家,专研 MySQL 十余年。擅长 MySQL、PostgreSQL、MongoDB 等开源数据库相关的备份恢复、SQL 调优、监控运维、高可用架构设计等。目前任职于爱可生,为各大运营商及银行金融企业提供 MySQL 相关技术支持、MySQL 相关课程培训等工作。
本文来源:原创投稿
*爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。
MySQL 组复制数据的一致性管理解析
来源于客户的一个问题。客户对组复制的数据一致性保障机制非常困惑,一直不太明白,其实就是对组复制参数
MySQL debian-ytt1:3306 ssl ytt Py > c1 = dba.get_cluster('ytt_mgr'); MySQL debian-ytt1:3306 ssl ytt Py > c1.status(); { "clusterName": "ytt_mgr", "defaultReplicaSet": { "name": "default", "primary": "debian-ytt1:3306", "ssl": "REQUIRED", "status": "OK", "statusText": "Cluster is ONLINE and can tolerate up to ONE failure.", "topology": { "debian-ytt1:3306": { "address": "debian-ytt1:3306", "mode": "R/W", "readReplicas": {}, "replicationLag": null, "role": "HA", "status": "ONLINE", "version": "8.0.20" }, "debian-ytt2:3306": { "address": "debian-ytt2:3306", "mode": "R/O", "readReplicas": {}, "replicationLag": null, "role": "HA", "status": "ONLINE", "version": "8.0.20" }, "debian-ytt3:3306": { "address": "debian-ytt3:3306", "mode": "R/O", "readReplicas": {}, "replicationLag": null, "role": "HA", "status": "ONLINE", "version": "8.0.20" } }, "topologyMode": "Single-Primary" }, "groupInformationSourceMember": "debian-ytt1:3306" }
三、三种选项值的含义和适用场景
3.1 EVENTUAL
这类选项代表最终一致性,组复制默认值。意思是说,设置了 EVENTUAL 的节点,其读或者写请求可以立即返回结果,不用等到新请求之前的中继日志处理完。
创建一张测试表 t1。
<debian-ytt1>create table t1 (id serial primary key, r1 int,r2 int,r3 char(36)); Query OK, 0 rows affected (0.07 sec)</debian-ytt1>
节点 1 正常插入一条记录。
<debian-ytt1>insert into t1 (r1,r2,r3) select 10,20,uuid(); Query OK, 1 row affected (0.02 sec) Records: 1 Duplicates: 0 Warnings: 0</debian-ytt1>
节点 2 及时应用这条记录到表 t1。
<debian-ytt2>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 10 | 20 | e878289e-89c4-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 1 row in set (0.00 sec)</debian-ytt2>
此时给节点 2 加一个 server 层的共享读锁,人为制造拥堵延迟。
<debian-ytt2>lock table t1 read; Query OK, 0 rows affected (0.00 sec)</debian-ytt2>
节点 1 再次插入一条 ID 为 2 的新记录。
<debian-ytt1>insert into t1 (r1,r2,r3) select 20,20,uuid(); Query OK, 1 row affected (0.02 sec) Records: 1 Duplicates: 0 Warnings: 0 <debian-ytt1>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 10 | 20 | e878289e-89c4-11ea-861d-08002753f58d | | 2 | 20 | 20 | 2982d33f-89c5-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 2 rows in set (0.00 sec)</debian-ytt1></debian-ytt1>
此时再次查询节点 2 可立即返回结果,但是数据并非最新,不包含最新 ID 为 2 的记录,还是之前的旧数据。
<debian-ytt2>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 10 | 20 | e878289e-89c4-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 1 row in set (0.00 sec)</debian-ytt2>
节点 2 上,ID 为 2 的这条记录,目前状态为:已拉到自己的中继日志,但尚未应用到表 t1。表 t1 的共享读锁释放掉后,才能继续应用。现在释放表 t1 的共享读锁,再次查询已经包含最新的记录。
<debian-ytt2>unlock tables; Query OK, 0 rows affected (0.01 sec) <debian-ytt2>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 10 | 20 | e878289e-89c4-11ea-861d-08002753f58d | | 3 | 20 | 20 | 759cc5c0-89c7-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+</debian-ytt2></debian-ytt2>
从以上例子可以看出,最终一致性模式优缺点。
- 优点:可以快速返回本节点已经成功应用的数据,不用等待所有的数据应用完成。
- 缺点:可能返回的数据比较旧。
3.2 BEFORE
这类选项代表保证本地节点强一致性。也就是说设置为此选项的本地节点必须要等待中继日志数据全部应用完成后,才会执行新的请求,否则会一直等待。等待的时间和中继日志里未应用的事务量成一定比率。
为了清晰起见,清空表 t1 数据。
<debian-ytt1>truncate t1; Query OK, 0 rows affected (0.17 sec)</debian-ytt1>
新启一个连接到节点 2,给表 t1 上共享读锁,对应的 SESSION ID =1。
<debian-ytt2>lock table t1 read; Query OK, 0 rows affected (0.01 sec)</debian-ytt2>
在节点 1 上插入一条新记录。
<debian-ytt1>insert into t1 select 1,1,1,uuid(); Query OK, 1 row affected (0.02 sec) Records: 1 Duplicates: 0 Warnings: 0</debian-ytt1>
另外开启一个新连接到节点 2,对应的 SESSION ID = 2。设置参数 group_replication_consistency=before,完了立刻查询表 t1 数据,处于等待状态。
<debian-ytt2>set @@group_replication_consistency='before'; Query OK, 0 rows affected (0.00 sec) <debian-ytt2>select * from t1; # 此处 HANG 住!</debian-ytt2></debian-ytt2>
在节点 3 上查询表 t1 数据,立刻返回刚才插入的记录,也就是说对节点 3 没有影响。
<debian-ytt3>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 1 | 1 | ee83837e-89ce-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 1 row in set (0.00 sec)</debian-ytt3>
此时切换到节点 2 的 SESSION ID = 1 的会话,解锁表 t1。
<debian-ytt2>unlock tables; Query OK, 0 rows affected (0.00 sec)</debian-ytt2>
再次查看节点 2 的 SESSION ID = 2 的会话,结果已经返回,时间为 3 分 17 秒。相比 EVENTUAL,并不是立即返回结果。
<debian-ytt2>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 1 | 1 | ee83837e-89ce-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 1 row in set (3 min 17.51 sec)</debian-ytt2>
可以看出,BEFORE 模式优先保证了本地节点永远读取到最新的数据。最大的缺点是必须煎熬等待本地节点中继日志里未应用的数据正常应用。如果日志里有很多写的不好的事务块或者大事务,则会造成本节点很大的延迟。
3.3 AFTER
这类选项代表全局强一致性。设置为此模式的节点,必须等待集群内其他所有其他节点应用完自己中继日志里的事务,才能返回结果。
把节点 1 参数
<debian-ytt1>truncate t1; Query OK, 0 rows affected (0.22 sec) <debian-ytt1>set @@group_replication_consistency='after'; Query OK, 0 rows affected (0.00 sec)</debian-ytt1></debian-ytt1>
在节点 2 上,给表 t1 加共享读锁。
<debian-ytt2>lock table t1 read; Query OK, 0 rows affected (0.01 sec)</debian-ytt2>
之后在节点 1 插入一条记录,并没有立即返回,处于等待状态,因为节点 2 上的表 t1 被锁了,节点 2 的日志要成功应用必须要等表 t1 解锁才可以。
<debian-ytt1>insert into t1 select 1,1,1,uuid(); # 处于等待状态</debian-ytt1>
此时回到节点 2,由于模式默认,立即返回结果,不过数据很旧。
<debian-ytt2>select * from t1; Empty set (0.00 sec)</debian-ytt2>
此时在节点 3 上对表 t1 进行查询,发现这个请求也处于等待状态。也就是说虽然节点 3 也是默认模式,但是由于主节点设置为 AFTER,节点 3 也必须等待其他的从节点日志应用完毕后才能返回结果。
<debian-ytt3>select * from t1;</debian-ytt3>
现在在节点 2 上解锁表 t1,再次回到节点 1 上的 ID 为 121 的连接,结果已经返回,不过花费了 6 分 47 秒。
<debian-ytt1>insert into t1 select 1,1,1,uuid(); Query OK, 1 row affected (6 min 47.14 sec) Records: 1 Duplicates: 0 Warnings: 0</debian-ytt1>
此时在节点 3 上检查之前的查询,结果也已经返回。
<debian-ytt3>select * from t1; +----+------+------+--------------------------------------+ | id | r1 | r2 | r3 | +----+------+------+--------------------------------------+ | 1 | 1 | 1 | 49430687-89e9-11ea-861d-08002753f58d | +----+------+------+--------------------------------------+ 1 row in set (18.25 sec)</debian-ytt3>
从以上过程可以看到,AFTER 是一个强同步的选项。优先保证了集群内所有节点的数据一致性,但是也带来一个很大的性能问题:集群对外总的事务提交时间依赖于组内最慢的那个节点。如果最慢的节点遇到故障,那其他节点就必须等待超时回滚了。
总结
本文对组复制的数据一致性级别参数值的设置做了详细的演示。可以看到我只说明了前三个选项,后面两个由于基于前三个选项的组合,这里没有单独说明,感兴趣可以自己实验下。
今天关于《技术分享 | MySQL 组复制数据一致性管理解析》的内容就介绍到这里了,是不是学起来一目了然!想要了解更多关于mysql的内容请关注golang学习网公众号!

- 上一篇
- 私有云和公共云有什么区别?

- 下一篇
- 传统企业数字化转型有没有必要?
-
- 拉长的棉花糖
- 这篇文章太及时了,作者大大加油!
- 2023-02-27 17:26:18
-
- 欢喜的八宝粥
- 这篇博文出现的刚刚好,细节满满,受益颇多,已加入收藏夹了,关注老哥了!希望老哥能多写数据库相关的文章。
- 2023-02-26 08:42:00
-
- 含糊的日记本
- 太给力了,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢师傅分享技术文章!
- 2023-02-25 21:36:35
-
- 潇洒的世界
- 细节满满,收藏了,感谢作者的这篇技术贴,我会继续支持!
- 2023-02-25 10:57:28
-
- 数据库 · MySQL | 1天前 |
- 如何检测电脑是否安装MySQL的5种方法
- 278浏览 收藏
-
- 数据库 · MySQL | 1天前 |
- MySQL分区表查询优化技巧
- 126浏览 收藏
-
- 数据库 · MySQL | 1天前 |
- MySQL建库语句与字符集设置教程
- 414浏览 收藏
-
- 数据库 · MySQL | 2天前 |
- MySQL中AS别名用法详解
- 320浏览 收藏
-
- 数据库 · MySQL | 2天前 |
- MySQL创建带主键的表实例
- 247浏览 收藏
-
- 数据库 · MySQL | 3天前 |
- 主外键关系怎么建立?
- 149浏览 收藏
-
- 数据库 · MySQL | 3天前 |
- MySQL中IF函数使用详解
- 392浏览 收藏
-
- 数据库 · MySQL | 4天前 |
- MySQL中IF函数使用详解
- 268浏览 收藏
-
- 数据库 · MySQL | 4天前 |
- MySQL入门:核心概念与操作全解析
- 162浏览 收藏
-
- 数据库 · MySQL | 4天前 |
- MySQL事务是什么?如何保证数据一致性?
- 349浏览 收藏
-
- 数据库 · MySQL | 4天前 |
- MySQL数据分片实现方法及常见方案解析
- 363浏览 收藏
-
- 数据库 · MySQL | 5天前 |
- MySQL基础:增删改查全教程
- 345浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 514次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 499次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
-
- AI Mermaid流程图
- SEO AI Mermaid 流程图工具:基于 Mermaid 语法,AI 辅助,自然语言生成流程图,提升可视化创作效率,适用于开发者、产品经理、教育工作者。
- 674次使用
-
- 搜获客【笔记生成器】
- 搜获客笔记生成器,国内首个聚焦小红书医美垂类的AI文案工具。1500万爆款文案库,行业专属算法,助您高效创作合规、引流的医美笔记,提升运营效率,引爆小红书流量!
- 684次使用
-
- iTerms
- iTerms是一款专业的一站式法律AI工作台,提供AI合同审查、AI合同起草及AI法律问答服务。通过智能问答、深度思考与联网检索,助您高效检索法律法规与司法判例,告别传统模板,实现合同一键起草与在线编辑,大幅提升法律事务处理效率。
- 707次使用
-
- TokenPony
- TokenPony是讯盟科技旗下的AI大模型聚合API平台。通过统一接口接入DeepSeek、Kimi、Qwen等主流模型,支持1024K超长上下文,实现零配置、免部署、极速响应与高性价比的AI应用开发,助力专业用户轻松构建智能服务。
- 771次使用
-
- 迅捷AIPPT
- 迅捷AIPPT是一款高效AI智能PPT生成软件,一键智能生成精美演示文稿。内置海量专业模板、多样风格,支持自定义大纲,助您轻松制作高质量PPT,大幅节省时间。
- 662次使用
-
- golang MySQL实现对数据库表存储获取操作示例
- 2022-12-22 499浏览
-
- 搞一个自娱自乐的博客(二) 架构搭建
- 2023-02-16 244浏览
-
- B-Tree、B+Tree以及B-link Tree
- 2023-01-19 235浏览
-
- mysql面试题
- 2023-01-17 157浏览
-
- MySQL数据表简单查询
- 2023-01-10 101浏览