当前位置:首页 > 文章列表 > 数据库 > MySQL > MySQL学习:聊聊日志管理

MySQL学习:聊聊日志管理

来源:SegmentFault 2023-02-16 15:30:17 0浏览 收藏

亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《MySQL学习:聊聊日志管理》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下MySQL、日志,希望所有认真读完的童鞋们,都有实质性的提高。

参照:系统是CentOS6.4  ,MySQL版本为5.5.32

MySQL 服务器上一共有六种日志:错误日志,查询日志,慢查询日志,二进制日志,事务日志,中继日志。

一 错误日志

错误日志不仅仅记录错误信息,它记录的事件有:
- 服务器启动和关闭过程中的信息
- 服务器运行过程中的错误信息
- 事件调度器运行一个事件时产生的信息
- (如果被配置为从服务器)启动从服务器进程时产生的信息

查看错误日志文件的路径

在mysql数据库中,错误日志功能是默认开启的。

  • 相关配置变量说明

  • 只查看第一个binlog文件的内容(show binlog events)

  • xml

  • 查看指定binlog文件的内容(show binlog events in 'binname.xxxxx')

  • mysql> show binlog events in 'mysql-bin.000002';

    Alt text

    • 获取指定位置binlog的内容(show binlog events from xxx)

  • 查看指定的binlog日志

  • shell

  • 按时间查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00"
    mysqlbinlog ../data/mysql-bin.000003 --stop-datetime="2015-3-12 17:30:00"
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00" --stop-datetime="2015-3-12 17:30:00"

  • 按字节数查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20
    mysqlbinlog ../data/mysql-bin.000003 --stop-position=200
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20 --stop-position=200

  • 过滤insert、update操作
    mysqlbinlog ../data/mysql-bin.000003 | grep insert

  • II 查看binlog日志并输出

    下面参考:使用mysqlbinlog提取二进制日志

    c、提取指定position位置的binlog日志并输出到压缩文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 |gzip >extra_01.sql.gz   d、提取指定position位置的binlog日志导入数据库   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 | mysql -uroot -p   e、提取指定开始时间的binlog并输出到日志文件   # mysqlbinlog --start-datetime="2014-12-15 20:15:23" /opt/data/APP01bin.000002 --result-file=extra02.sql   f、提取指定位置的多个binlog日志文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 /opt/data/APP01bin.000002|more   g、提取指定数据库binlog并转换字符集到UTF8   # mysqlbinlog --database=test --set-charset=utf8 /opt/data/APP01bin.000001 /opt/data/APP01bin.000002 >test.sql   h、远程提取日志,指定结束时间   # mysqlbinlog -urobin -p -h192.168.1.116 -P3306 --stop-datetime="2014-12-15 20:30:23" --read-from-remote-server mysql-bin.000033 |more   i、远程提取使用row格式的binlog日志并输出到本地文件   # mysqlbinlog -urobin -p -P3606 -h192.168.1.177 --read-from-remote-server -vv inst3606bin.000005 >row.sql  

    expire_logs_days 参数

    在 my.cnf 中配置

  • 清除所有日志(不存在主从复制关系)

  • 清除指定日志之前的所有日志

  • mysql> PURGE MASTER LOGS TO 'mysql-bin.000003';

    • 清除某一时间点前的所有日志

  • 清除 n 天前的所有日志

  • mysql> PURGE MASTER LOGS BEFORE CURRENT_DATE - INTERVAL 10 DAY;

    警告

    由于二进制日志的重要性,请仅在确定不再需要将要被删除的二进制文件,或者在已经对二进制日志文件进行归档备份,或者已经进行数据库备份的情况下,才进行删除操作,且不要使用 rm 命令删除。

    五 事务日志

    出于性能和故障恢复的考虑,MySQL 服务器不会立即执行事务,而是先将事务记录在日志里面,这样可以将随机IO转换成顺序IO,从而提高IO性能。

    事物日志通常是一组至少两个固定大小的文件,当其中一个写满时,MySQL会将事务日志写入另一个日志文件(先清空原有内容)。当 MySQL 从崩溃中恢复时,会读取事务日志,将其中已经 commit 的事务写入数据库,没有 commit 的事务 rollback 。

    事务日志由存储引擎(innodb)管理,一般不需要手动干预。

    六 中继日志

    中继日志用于主从复制架构中的从服务器上,从服务器的 slave 进程从主服务器处获取二进制日志的内容并写入中继日志,然后由 IO 进程读取并执行中继日志中的语句。

    日志分析工具

    • mysqldumpslowmysql:官方提供的慢查询日志分析工具

    • mysqlsla:hackmysql.com 推出的一款日志分析工具(该网站还维护了 mysqlreport,mysqlidxchk 等比较实用的mysql 工具)。   整体来说,功能非常强大。输出的数据报表非常有利于分析慢查询的原因,包括执行频率、数据量、查询消耗等。

    • myprofi:纯 php 写的一个开源分析工具.项目在 sourceforge 上。功能上,列出了总的慢查询次数和类型、去重后的 sql 语句、执行次数及其占总的 slow log 数量的百分比。从整体输出样式来看,比 mysql-log-filter 还要简洁,省去了很多不必要的内容。对于只想看 sql 语句及执行次数的用户来说,比较推荐。

    • mysql-log-filtergoogle code 上找到的一个分析工具,提供了 python 和 php 两种可执行的脚本。 特色功能除了统计信息外,还针对输出内容做了排版和格式化,保证整体输出的简洁。喜欢简洁报表的朋友,推荐使用一下。

    MySQL Innodb日志机制深入分析

    参考

    MySQL 日志管理
    MySQL学习:聊聊日志管理
    使用mysqlbinlog提取二进制日志

    今天关于《MySQL学习:聊聊日志管理》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!

    版本声明
    本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
    MySQL怎么批量插入数据?效率如何?(效率比较)MySQL怎么批量插入数据?效率如何?(效率比较)
    上一篇
    MySQL怎么批量插入数据?效率如何?(效率比较)
    菜鸟小白要怎么排查数据库异常?(方法分享)
    下一篇
    菜鸟小白要怎么排查数据库异常?(方法分享)
    查看更多
    最新文章
    查看更多
    课程推荐
    • 前端进阶之JavaScript设计模式
      前端进阶之JavaScript设计模式
      设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
      542次学习
    • GO语言核心编程课程
      GO语言核心编程课程
      本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
      508次学习
    • 简单聊聊mysql8与网络通信
      简单聊聊mysql8与网络通信
      如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
      497次学习
    • JavaScript正则表达式基础与实战
      JavaScript正则表达式基础与实战
      在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
      487次学习
    • 从零制作响应式网站—Grid布局
      从零制作响应式网站—Grid布局
      本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
      484次学习
    查看更多
    AI推荐
    • 茅茅虫AIGC检测:精准识别AI生成内容,保障学术诚信
      茅茅虫AIGC检测
      茅茅虫AIGC检测,湖南茅茅虫科技有限公司倾力打造,运用NLP技术精准识别AI生成文本,提供论文、专著等学术文本的AIGC检测服务。支持多种格式,生成可视化报告,保障您的学术诚信和内容质量。
      18次使用
    • 赛林匹克平台:科技赛事聚合,赋能AI、算力、量子计算创新
      赛林匹克平台(Challympics)
      探索赛林匹克平台Challympics,一个聚焦人工智能、算力算法、量子计算等前沿技术的赛事聚合平台。连接产学研用,助力科技创新与产业升级。
      50次使用
    • SEO  笔格AIPPT:AI智能PPT制作,免费生成,高效演示
      笔格AIPPT
      SEO 笔格AIPPT是135编辑器推出的AI智能PPT制作平台,依托DeepSeek大模型,实现智能大纲生成、一键PPT生成、AI文字优化、图像生成等功能。免费试用,提升PPT制作效率,适用于商务演示、教育培训等多种场景。
      57次使用
    • 稿定PPT:在线AI演示设计,高效PPT制作工具
      稿定PPT
      告别PPT制作难题!稿定PPT提供海量模板、AI智能生成、在线协作,助您轻松制作专业演示文稿。职场办公、教育学习、企业服务全覆盖,降本增效,释放创意!
      53次使用
    • Suno苏诺中文版:AI音乐创作平台,人人都是音乐家
      Suno苏诺中文版
      探索Suno苏诺中文版,一款颠覆传统音乐创作的AI平台。无需专业技能,轻松创作个性化音乐。智能词曲生成、风格迁移、海量音效,释放您的音乐灵感!
      57次使用
    微信登录更方便
    • 密码登录
    • 注册账号
    登录即同意 用户协议隐私政策
    返回登录
    • 重置密码