当前位置:首页 > 文章列表 > 数据库 > MySQL > MySQL学习:聊聊日志管理

MySQL学习:聊聊日志管理

来源:SegmentFault 2023-02-16 15:30:17 0浏览 收藏

亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《MySQL学习:聊聊日志管理》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下MySQL、日志,希望所有认真读完的童鞋们,都有实质性的提高。

参照:系统是CentOS6.4  ,MySQL版本为5.5.32

MySQL 服务器上一共有六种日志:错误日志,查询日志,慢查询日志,二进制日志,事务日志,中继日志。

一 错误日志

错误日志不仅仅记录错误信息,它记录的事件有:
- 服务器启动和关闭过程中的信息
- 服务器运行过程中的错误信息
- 事件调度器运行一个事件时产生的信息
- (如果被配置为从服务器)启动从服务器进程时产生的信息

查看错误日志文件的路径

在mysql数据库中,错误日志功能是默认开启的。

  • 相关配置变量说明

  • 只查看第一个binlog文件的内容(show binlog events)

  • xml

  • 查看指定binlog文件的内容(show binlog events in 'binname.xxxxx')

  • mysql> show binlog events in 'mysql-bin.000002';

    Alt text

    • 获取指定位置binlog的内容(show binlog events from xxx)

  • 查看指定的binlog日志

  • shell

  • 按时间查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00"
    mysqlbinlog ../data/mysql-bin.000003 --stop-datetime="2015-3-12 17:30:00"
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00" --stop-datetime="2015-3-12 17:30:00"

  • 按字节数查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20
    mysqlbinlog ../data/mysql-bin.000003 --stop-position=200
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20 --stop-position=200

  • 过滤insert、update操作
    mysqlbinlog ../data/mysql-bin.000003 | grep insert

  • II 查看binlog日志并输出

    下面参考:使用mysqlbinlog提取二进制日志

    c、提取指定position位置的binlog日志并输出到压缩文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 |gzip >extra_01.sql.gz   d、提取指定position位置的binlog日志导入数据库   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 | mysql -uroot -p   e、提取指定开始时间的binlog并输出到日志文件   # mysqlbinlog --start-datetime="2014-12-15 20:15:23" /opt/data/APP01bin.000002 --result-file=extra02.sql   f、提取指定位置的多个binlog日志文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 /opt/data/APP01bin.000002|more   g、提取指定数据库binlog并转换字符集到UTF8   # mysqlbinlog --database=test --set-charset=utf8 /opt/data/APP01bin.000001 /opt/data/APP01bin.000002 >test.sql   h、远程提取日志,指定结束时间   # mysqlbinlog -urobin -p -h192.168.1.116 -P3306 --stop-datetime="2014-12-15 20:30:23" --read-from-remote-server mysql-bin.000033 |more   i、远程提取使用row格式的binlog日志并输出到本地文件   # mysqlbinlog -urobin -p -P3606 -h192.168.1.177 --read-from-remote-server -vv inst3606bin.000005 >row.sql  

    expire_logs_days 参数

    在 my.cnf 中配置

  • 清除所有日志(不存在主从复制关系)

  • 清除指定日志之前的所有日志

  • mysql> PURGE MASTER LOGS TO 'mysql-bin.000003';

    • 清除某一时间点前的所有日志

  • 清除 n 天前的所有日志

  • mysql> PURGE MASTER LOGS BEFORE CURRENT_DATE - INTERVAL 10 DAY;

    警告

    由于二进制日志的重要性,请仅在确定不再需要将要被删除的二进制文件,或者在已经对二进制日志文件进行归档备份,或者已经进行数据库备份的情况下,才进行删除操作,且不要使用 rm 命令删除。

    五 事务日志

    出于性能和故障恢复的考虑,MySQL 服务器不会立即执行事务,而是先将事务记录在日志里面,这样可以将随机IO转换成顺序IO,从而提高IO性能。

    事物日志通常是一组至少两个固定大小的文件,当其中一个写满时,MySQL会将事务日志写入另一个日志文件(先清空原有内容)。当 MySQL 从崩溃中恢复时,会读取事务日志,将其中已经 commit 的事务写入数据库,没有 commit 的事务 rollback 。

    事务日志由存储引擎(innodb)管理,一般不需要手动干预。

    六 中继日志

    中继日志用于主从复制架构中的从服务器上,从服务器的 slave 进程从主服务器处获取二进制日志的内容并写入中继日志,然后由 IO 进程读取并执行中继日志中的语句。

    日志分析工具

    • mysqldumpslowmysql:官方提供的慢查询日志分析工具

    • mysqlsla:hackmysql.com 推出的一款日志分析工具(该网站还维护了 mysqlreport,mysqlidxchk 等比较实用的mysql 工具)。   整体来说,功能非常强大。输出的数据报表非常有利于分析慢查询的原因,包括执行频率、数据量、查询消耗等。

    • myprofi:纯 php 写的一个开源分析工具.项目在 sourceforge 上。功能上,列出了总的慢查询次数和类型、去重后的 sql 语句、执行次数及其占总的 slow log 数量的百分比。从整体输出样式来看,比 mysql-log-filter 还要简洁,省去了很多不必要的内容。对于只想看 sql 语句及执行次数的用户来说,比较推荐。

    • mysql-log-filtergoogle code 上找到的一个分析工具,提供了 python 和 php 两种可执行的脚本。 特色功能除了统计信息外,还针对输出内容做了排版和格式化,保证整体输出的简洁。喜欢简洁报表的朋友,推荐使用一下。

    MySQL Innodb日志机制深入分析

    参考

    MySQL 日志管理
    MySQL学习:聊聊日志管理
    使用mysqlbinlog提取二进制日志

    今天关于《MySQL学习:聊聊日志管理》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!

    版本声明
    本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
    MySQL怎么批量插入数据?效率如何?(效率比较)MySQL怎么批量插入数据?效率如何?(效率比较)
    上一篇
    MySQL怎么批量插入数据?效率如何?(效率比较)
    菜鸟小白要怎么排查数据库异常?(方法分享)
    下一篇
    菜鸟小白要怎么排查数据库异常?(方法分享)
    查看更多
    最新文章
    查看更多
    课程推荐
    • 前端进阶之JavaScript设计模式
      前端进阶之JavaScript设计模式
      设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
      542次学习
    • GO语言核心编程课程
      GO语言核心编程课程
      本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
      508次学习
    • 简单聊聊mysql8与网络通信
      简单聊聊mysql8与网络通信
      如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
      497次学习
    • JavaScript正则表达式基础与实战
      JavaScript正则表达式基础与实战
      在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
      487次学习
    • 从零制作响应式网站—Grid布局
      从零制作响应式网站—Grid布局
      本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
      484次学习
    查看更多
    AI推荐
    • 笔灵AI生成答辩PPT:高效制作学术与职场PPT的利器
      笔灵AI生成答辩PPT
      探索笔灵AI生成答辩PPT的强大功能,快速制作高质量答辩PPT。精准内容提取、多样模板匹配、数据可视化、配套自述稿生成,让您的学术和职场展示更加专业与高效。
      16次使用
    • 知网AIGC检测服务系统:精准识别学术文本中的AI生成内容
      知网AIGC检测服务系统
      知网AIGC检测服务系统,专注于检测学术文本中的疑似AI生成内容。依托知网海量高质量文献资源,结合先进的“知识增强AIGC检测技术”,系统能够从语言模式和语义逻辑两方面精准识别AI生成内容,适用于学术研究、教育和企业领域,确保文本的真实性和原创性。
      25次使用
    • AIGC检测服务:AIbiye助力确保论文原创性
      AIGC检测-Aibiye
      AIbiye官网推出的AIGC检测服务,专注于检测ChatGPT、Gemini、Claude等AIGC工具生成的文本,帮助用户确保论文的原创性和学术规范。支持txt和doc(x)格式,检测范围为论文正文,提供高准确性和便捷的用户体验。
      30次使用
    • 易笔AI论文平台:快速生成高质量学术论文的利器
      易笔AI论文
      易笔AI论文平台提供自动写作、格式校对、查重检测等功能,支持多种学术领域的论文生成。价格优惠,界面友好,操作简便,适用于学术研究者、学生及论文辅导机构。
      42次使用
    • 笔启AI论文写作平台:多类型论文生成与多语言支持
      笔启AI论文写作平台
      笔启AI论文写作平台提供多类型论文生成服务,支持多语言写作,满足学术研究者、学生和职场人士的需求。平台采用AI 4.0版本,确保论文质量和原创性,并提供查重保障和隐私保护。
      35次使用
    微信登录更方便
    • 密码登录
    • 注册账号
    登录即同意 用户协议隐私政策
    返回登录
    • 重置密码