MySQL通过binlog恢复数据
在数据库实战开发的过程中,我们经常会遇到一些这样那样的问题,然后要卡好半天,等问题解决了才发现原来一些细节知识点还是没有掌握好。今天golang学习网就整理分享《MySQL通过binlog恢复数据》,聊聊MySQLBinlog、恢复数据,希望可以帮助到正在努力赚钱的你。
mysql 日志文件
任何成熟软件都会有一套成熟的日志系统,当软件出现问题时,这些日志就是查询问题来源的宝库。同样,mysql也不例外,也会有一系列日志记录mysql的运行状态。
mysql主要有以下几种日志:
- 错误日志:记录mysql运行过程中的错误信息
- 一般查询日志:记录mysql正在运行的语句,包括查询、修改、更新等的每条sql
- 慢查询日志:记录查询比较耗时的SQL语句
- binlog日志:记录数据修改记录,包括创建表、数据更新等
这些日志均需要在my.cnf文件进行配置,如果不知道mysql的配置文件路径,可以使用mysql命令进行查找,
mysql --verbose --help|grep -A 1 'Default options' #该命令会罗列出my.cnf顺序查找的路径。
binlog日志
binlog就是binary log,二进制日志文件,记录所有数据库更新语句,包括表更新和记录更新,即数据操纵语言(DML),binlog主要用于数据恢复和配置主从复制等;
数据恢复:当数据库误删或者发生不可描述的事情时,可以通过binlog恢复到某个时间点的数据。主从复制:当有数据库更新之后,主库通过binlog记录并通知从库进行更新,从而保证主从数据库数据一致;
mysql按照功能分为服务层模块和存储引擎层模块,服务层负责客户端连接、SQL语句处理优化等操作,存储引擎层负责数据的存储和查询;binlog属于服务层模块的日志,即引擎无关性,所有数据引擎的数据更改都会记录binlog日志。当数据库发生崩溃时,如果使用InnoDB引擎,binlog日志还可以检验InnoDB的redo日志的commit情况。
binlog日志开启
日志开启方式:
1、添加配置
log_bin=ON log_bin_basename=/path/bin-log log_bin_index=/path/bin-log.index
2、仅仅设置log-bin参数
log-bin=/path/bin-log
当开启binlog日志之后,mysql会创建一个 log_bin_index指定的 .index 文件和多个二进制日志文件,index中按顺序记录了mysql使用的所有binlog文件。binlog日志则会以指定的名称(或默认值) 加自增的数字作为后缀,ex:bin-log.000001,当发生下述三种情况时,binlog日志便会进行重建:
文件大小达到max_binlog_size参数的值 执行 flush logs命令 重启mysql服务
binlog 日志格式
通过参数binlog_format参数的值,可以设置binlog的格式,可选值有 statement、row、mixed * statement格式:记录数据库执行的原始SQL语句 * row格式:记录具体的行的修改,这个为目前默认值 * mixed格式:因为上边两种格式各有优缺点,所以就出现了mixed格式
binlog日志查看工具:mysqlbinlog
因为binlog是二进制文件,不能像其他文件一样,直接打开查看。但mysql提供了binlog查看工具mysqlbinlog,可以解析二进制文件。当然不同格式的日志解析结果是不一样的; 1. statement格式日志,执行mysqlbinlog /path/bin-log.000001,可以直接看到原始执行的SQL语句 2. row格式日志,则可读性没有那么好,但仍可通过参数使文档更加可读 mysqlbinlog -v /path/bin-log.000001
mysqlbinlog两对非常重要的参数 1. --start-datetime --stop-datetime 解析某一个时间段内的binlog; 2. --start-position --stop-position 解析在两个position之间的binlog;
使用binlog恢复数据
使用binlog恢复数据,本质上就是通过binlog找到所有DML操作,去掉错误的SQL语句,然后重走一遍长征路,就可以将数据恢复;
线下实操
1.创建数据表并插入初始值
CREATE TABLE `users` (
`id` int(11) unsigned NOT NULL AUTO_INCREMENT,
`name` varchar(255) DEFAULT NULL,
`age` int(8) DEFAULT NULL,
PRIMARY KEY (`id`)
) ENGINE=InnoDB DEFAULT CHARSET=utf8mb4;
INSERT INTO `users` (`id`, `name`, `age`)
VALUES
(null, '姓名一', 5);
2.找到上一次全量备份的数据库和binlog的position(ps:当然也可以通过时间进行恢复)。此处以目前状态作为备份的初始值,
mysqldump -uroot -p T > /path/xxx.sql; # 备份数据库
show master status; # 查看当前的position位置,此时值为154
3.插入多条记录
INSERT INTO `users` (`id`, `name`, `age`)
VALUES
(null, '姓名二', 13),
(null, '姓名三', 14),
(null, '姓名四', 15),
(null, '姓名五', 16),
(null, '姓名六', 17);
4.进行误操作,并且在误操作之后又插入几条数据
update users set age = 5;
INSERT INTO `users` (`id`, `name`, `age`)
VALUES
(null, '姓名七', 16),
(null, '姓名八', 18);
5.发现误操作之后,进行数据恢复,首先停止mysql对外的服务,利用备份数据恢复到上次数据;
6.通过mysqlbinlog命令对二进制文件进行分析,分析发现
误操作发生在position为706位置,且上次正常操作的结束位置在513
在1152到结尾位置有正常执行的SQL执行
7.通过mysqlbinlog命令从binlog日志中导出可执行的SQL文件,并将数据导入到mysql
mysqlbinlog --start-position=154 --stop-position=513 bin-log.000001 > /path/bak.sql; mysql -uroot -p8.跳过错误的更新语句,再通过步骤7的逻辑把后续正常语句重新跑一遍,完成数据恢复工作
小结
无论什么时间,数据库发生崩溃都会令人愁眉紧锁,心烦意乱。binlog可以说是在各种情况下,数据库崩溃、数据丢失之后的一粒后悔药,本文通过线下环境,简单的对数据库进行了一次数据恢复实验,如有不对,还请指教
文中关于mysql的知识介绍,希望对你的学习有所帮助!若是受益匪浅,那就动动鼠标收藏这篇《MySQL通过binlog恢复数据》文章吧,也可关注golang学习网公众号了解相关技术文章。
解决Navicat for Mysql连接报错1251的问题(连接失败)
- 上一篇
- 解决Navicat for Mysql连接报错1251的问题(连接失败)
- 下一篇
- 一看就懂的MySQL的聚簇索引及聚簇索引是如何长高的
-
- 数据库 · MySQL | 4小时前 |
- MySQL 事务隔离级别改成 READ COMMITTED 后会少什么锁
- 284浏览 收藏
-
- 数据库 · MySQL | 7小时前 | MySQL · 递归查询 · CTE · mysql WITH RECURSIVE CTE
- MySQL CTE 递归查询为什么会超过默认深度
- 270浏览 收藏
-
- 数据库 · MySQL | 8小时前 | MySQL · 窗口函数 · SQL排序 · mysql 稳定排序 窗口函数 ROW_NUMBER
- MySQL 窗口函数排序相同值时怎么保证结果稳定
- 418浏览 收藏
-
- 数据库 · MySQL | 11小时前 |
- MySQL 生成列索引为什么比直接查 JSON 更稳定
- 401浏览 收藏
-
- 数据库 · MySQL | 14小时前 |
- MySQL GTID 复制切换前怎么检查事务是否连续
- 357浏览 收藏
-
- 数据库 · MySQL | 15小时前 |
- MySQL 修改大表列类型前怎么估算复制和回滚边界
- 393浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 31次使用
-
- SuperCLUE
- SuperCLUE是权威的中文大语言模型综合评测基准,涵盖语言理解、知识应用、AI Agent智能体及安全性等12项核心能力。通过多轮对话与客观测试,定期发布榜单与技术报告,为模型研发、优化及行业选型提供科学依据。
- 187次使用
-
- C-Eval
- 深入了解C-Eval中文评估套件,涵盖52个学科与4级难度。本文详解其功能特点、Zero-shot/Few-shot使用方法及代码示例,助您全面评测LLM中文理解与泛化能力。
- 126次使用
-
- AI Prompt Library
- 探索AI Prompt Library免费资源库,涵盖营销、写作及多场景AI提示词。兼容ChatGPT、Claude等工具,一键复制优化输出,提升工作效率。
- 49次使用
-
- Generrated
- Generrated汇集9300+张DALL·E生成图像及对应提示词,支持查看完整图集、对比DALL·E 2与3版本差异,是AI绘图新手学习Prompt设计与获取创作灵感的实用工具。
- 32次使用
-
- 一文详解MySQL Binlog日志与主从复制
- 2022-12-29 436浏览
-
- Mysql如何通过binlog日志恢复数据详解
- 2022-12-30 381浏览
-
- MySQL的binlog日志使用详解
- 2022-12-31 159浏览
-
- 开启MySQL的binlog日志的方法步骤
- 2022-12-29 240浏览
-
- MySQL binlog_ignore_db 参数的具体使用
- 2022-12-31 436浏览

