读数据密集型应用系统设计有感而发(四):数据库事务
在数据库实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《读数据密集型应用系统设计有感而发(四):数据库事务》,聊聊MySQL、数据库,希望可以帮助到正在努力赚钱的你。
有些人抱怨,常用的两阶段提交在性能和可用性方面代价太高。而我们认为事务滥用和过度使用所引入的性能瓶颈应该主要由应用层来解决,而不是简单的抛弃事务
--------------------- 来自google的全球分布式数据库
ACID
原子性
在出错时中止事务,并将部分完成的写入全部丢弃。可以让业务层安全的进行重试。
一致性
主要是指对数据有特定的预期状态,任何数据更改必须满足这些状态约束。这种一致性本质上是要求应用层来维护状态一致,应用程序有责任正确地定义事务来保证一致性。这种一致性可以通过数据库提供的原子性,隔离性,持久性来达到,但它本身并不源于数据库。
隔离性
并发执行的多个事务互相隔离,它们不能互相交叉。
持久性
保证事务一旦提交成功,即使存在硬件故障或者数据库崩溃,事务所写入的任何数据也不会消失。对于单节点数据库,持久性意味着存入了非易失性设备(磁盘或者ssd等),在写入的过程中通常还涉及了预写日志(比如mysql redo log),可以在磁盘损坏时恢复数据。对于多节点数据库,持久性意味着多节点的复制,要保证数据库复制到其它节点了才算成功。
弱隔离级别
防止脏读
实现读-提交隔离级别,采用多版本控制(MVCC),实现快照隔离,事务每次读取的数据都是已提交事务的最新版本,可以防止脏读。
防止脏写
实现读-提交隔离级别,通过加行锁的方式来实现。
防止读倾斜(不可重复读)
实现快照隔离级别,采用多版本控制技术(MVCC)。相比于读-提交,每次查询时单独创建最新的快照,快照隔离级别下采用一个快照来运行整个事务。
在innodb中是如何实现MVCC的呢?主要是采用版本号。每个事务在在开始的时候会生成一个transaction id,记为row trx_id。对于数据库的表新增两个隐藏列,分别是创建列和删除列,记录创建和删除时的版本号,填入的是row trx_id值。在快照隔离级别下有两种方式,叫作快照读和当前读。快照读是指事务开始时保存了一个快照,后续读取的数据都是取自这个快照;当前读是指读取数据时需要检查数据当前的最新值,必要时还需要加锁。
对于快照读,innodb引擎会生成一个版本号数组,将事务生成的row trx_id和数组进行比对,确认读到的数据。对于已提交的数据和本事务提交的数据能够读取到,对于未提交的事务的数据则读取不到。
对于当前读,是指的当我们需要在事务中更新数据时,需要读到当前数据库中的最新数据,而不是快照中的数据,如果有冲突,需要加锁实现。
防止更新丢失
更新丢失可能发生在这样的一个操作场景中:应用程序从数据库中读取某些值,根据应用逻辑作出修改,然后写回新值。如果两个事务并发做类似的操作,则可能会数据被覆盖,导致更新丢失。解决方案有一下几种
- 原子写操作
- 显示加锁
- 自动检测更新丢失
- 原子比较和设置
- 冲突解决与复制
防止写倾斜和幻读
写倾斜不是一种脏写,也不是更新丢失,两笔事务更新的是不同的对象。事务首先查询数据,根据返回的结果而作出某些决定,然后修改数据库。当事务提交时支持决定的前提条件已不再成立,最终造成不符合预期的改变。只有可串行化的隔离才能防止这种异常。
可串行化
严格串行执行事务
如果每个事务的执行速度非常快,且单个cpu核能满足事务的吞吐量需求,严格串行执行是一个非常简单有效的方案。
两阶段加锁
数据库的每个对象都有一个读写锁来隔离读写操作。即锁可以处于共享模式或独占模式。
- 如果事务要读取对象,必须先以共享模式获得锁。
- 如果事务要修改对象,必须已独占模式获取锁。
- 如果事务要先读取后修改对象,要从共享锁升级为独占锁。
- 事务获得锁之后,一直到事务结束才释放锁。
有两个注意事项
①因为锁是在事务结束时才释放,所以冲突更频繁的锁,应该在越靠近事务结束的地方运行,减少事务等待时间。
②对于死锁可以开启死锁检测机制,产生死锁时可以强行中止一个,并由应用层来重试。但是死锁检测很耗内存的cpu,如果一个事务更新的太频繁,多个事务同时运行,可能导致大量的死锁检测,从而会降低系统的并发度。解决办法是在数据库层控制一个数据最多只能由有限的事务同时修改该数据,其它事务排队等待,减少死锁检测。
可串行的快照隔离
秉持乐观预期的原则,允许多个事务并发执行而不互相阻塞,仅当事务尝试提交时,才检测可能的冲突,如果违背了串行化,则某些事务会被终止。
本篇关于《读数据密集型应用系统设计有感而发(四):数据库事务》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于数据库的相关知识,请关注golang学习网公众号!
MySQL安装配置教程
- 上一篇
- MySQL安装配置教程
- 下一篇
- MySQL 主从复制加密以及binlog的加密实现
-
- 数据库 · MySQL | 1小时前 |
- MySQL invisible index 如何安全观察索引下线影响
- 300浏览 收藏
-
- 数据库 · MySQL | 3小时前 | MySQL · 索引优化 · generated column · mysql 索引 优化器 生成列
- MySQL 生成列索引为什么没有被优化器使用
- 300浏览 收藏
-
- 数据库 · MySQL | 6小时前 |
- MySQL 窗口函数取每组最新记录时如何处理并列时间
- 242浏览 收藏
-
- 数据库 · MySQL | 7小时前 |
- MySQL JSON_VALUE 返回 NULL 时怎么区分缺少路径和空值
- 170浏览 收藏
-
- 数据库 · MySQL | 8小时前 | MySQL · JSON查询 · JSON_TABLE · SQL技巧 · mysql JSON_TABLE FOR ORDINALITY JSON数组序号
- MySQL JSON_TABLE 的 FOR ORDINALITY 怎么保留数组原始序号
- 139浏览 收藏
-
- 数据库 · MySQL | 10小时前 |
- MySQL 复制延迟升高时怎么区分 SQL 线程和 IO 线程
- 304浏览 收藏
-
- 数据库 · MySQL | 13小时前 | MySQL事件 · 事件调度器 · 任务表排查 · mysql 定时任务 CREATE EVENT Event Scheduler INFORMATION_SCHEMA.EVENTS
- MySQL 事件调度器执行了但任务表没有更新怎么排查
- 486浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 46次使用
-
- SuperCLUE
- SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
- 198次使用
-
- C-Eval
- 深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
- 133次使用
-
- AI Prompt Library
- 探索AI Prompt Library免费资源库,涵盖营销、写作及多场景AI提示词。兼容ChatGPT、Claude等工具,一键复制优化输出,提升工作效率。
- 66次使用
-
- Generrated
- Generrated汇集9300+张DALL·E生成图像及对应提示词,支持查看完整图集、对比DALL·E 2与3版本差异,是AI绘图新手学习Prompt设计与获取创作灵感的实用工具。
- 47次使用
-
- MySQL 明明加了索引,为什么查询还是很慢?先查这 6 个点
- 2026-06-27 374浏览
-
- 接口返回的数据和数据库不一致怎么办?按数据生命周期排查
- 2026-06-27 398浏览
-
- golang MySQL实现对数据库表存储获取操作示例
- 2022-12-22 499浏览
-
- golang 基于 mysql 简单实现分布式读写锁
- 2023-01-07 384浏览
-
- 详解如何利用GORM实现MySQL事务
- 2023-01-07 184浏览
