登录
首页 >  数据库 >  MySQL

MySQL学习:聊聊日志管理

来源:SegmentFault

时间:2023-02-16 15:30:17 447浏览 收藏

亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《MySQL学习:聊聊日志管理》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下MySQL、日志,希望所有认真读完的童鞋们,都有实质性的提高。

参照:系统是CentOS6.4  ,MySQL版本为5.5.32

MySQL 服务器上一共有六种日志:错误日志,查询日志,慢查询日志,二进制日志,事务日志,中继日志。

一 错误日志

错误日志不仅仅记录错误信息,它记录的事件有:
- 服务器启动和关闭过程中的信息
- 服务器运行过程中的错误信息
- 事件调度器运行一个事件时产生的信息
- (如果被配置为从服务器)启动从服务器进程时产生的信息

查看错误日志文件的路径

在mysql数据库中,错误日志功能是默认开启的。

  • 相关配置变量说明

  • 只查看第一个binlog文件的内容(show binlog events)

  • xml

  • 查看指定binlog文件的内容(show binlog events in 'binname.xxxxx')

  • mysql> show binlog events in 'mysql-bin.000002';

    Alt text

    • 获取指定位置binlog的内容(show binlog events from xxx)

  • 查看指定的binlog日志

  • shell

  • 按时间查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00"
    mysqlbinlog ../data/mysql-bin.000003 --stop-datetime="2015-3-12 17:30:00"
    mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00" --stop-datetime="2015-3-12 17:30:00"

  • 按字节数查看二进制日志
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20
    mysqlbinlog ../data/mysql-bin.000003 --stop-position=200
    mysqlbinlog ../data/mysql-bin.000003 --start-position=20 --stop-position=200

  • 过滤insert、update操作
    mysqlbinlog ../data/mysql-bin.000003 | grep insert

  • II 查看binlog日志并输出

    下面参考:使用mysqlbinlog提取二进制日志

    c、提取指定position位置的binlog日志并输出到压缩文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 |gzip >extra_01.sql.gz   d、提取指定position位置的binlog日志导入数据库   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 | mysql -uroot -p   e、提取指定开始时间的binlog并输出到日志文件   # mysqlbinlog --start-datetime="2014-12-15 20:15:23" /opt/data/APP01bin.000002 --result-file=extra02.sql   f、提取指定位置的多个binlog日志文件   # mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 /opt/data/APP01bin.000002|more   g、提取指定数据库binlog并转换字符集到UTF8   # mysqlbinlog --database=test --set-charset=utf8 /opt/data/APP01bin.000001 /opt/data/APP01bin.000002 >test.sql   h、远程提取日志,指定结束时间   # mysqlbinlog -urobin -p -h192.168.1.116 -P3306 --stop-datetime="2014-12-15 20:30:23" --read-from-remote-server mysql-bin.000033 |more   i、远程提取使用row格式的binlog日志并输出到本地文件   # mysqlbinlog -urobin -p -P3606 -h192.168.1.177 --read-from-remote-server -vv inst3606bin.000005 >row.sql  

    expire_logs_days 参数

    在 my.cnf 中配置

  • 清除所有日志(不存在主从复制关系)

  • 清除指定日志之前的所有日志

  • mysql> PURGE MASTER LOGS TO 'mysql-bin.000003';

    • 清除某一时间点前的所有日志

  • 清除 n 天前的所有日志

  • mysql> PURGE MASTER LOGS BEFORE CURRENT_DATE - INTERVAL 10 DAY;

    警告

    由于二进制日志的重要性,请仅在确定不再需要将要被删除的二进制文件,或者在已经对二进制日志文件进行归档备份,或者已经进行数据库备份的情况下,才进行删除操作,且不要使用 rm 命令删除。

    五 事务日志

    出于性能和故障恢复的考虑,MySQL 服务器不会立即执行事务,而是先将事务记录在日志里面,这样可以将随机IO转换成顺序IO,从而提高IO性能。

    事物日志通常是一组至少两个固定大小的文件,当其中一个写满时,MySQL会将事务日志写入另一个日志文件(先清空原有内容)。当 MySQL 从崩溃中恢复时,会读取事务日志,将其中已经 commit 的事务写入数据库,没有 commit 的事务 rollback 。

    事务日志由存储引擎(innodb)管理,一般不需要手动干预。

    六 中继日志

    中继日志用于主从复制架构中的从服务器上,从服务器的 slave 进程从主服务器处获取二进制日志的内容并写入中继日志,然后由 IO 进程读取并执行中继日志中的语句。

    日志分析工具

    • mysqldumpslowmysql:官方提供的慢查询日志分析工具

    • mysqlsla:hackmysql.com 推出的一款日志分析工具(该网站还维护了 mysqlreport,mysqlidxchk 等比较实用的mysql 工具)。   整体来说,功能非常强大。输出的数据报表非常有利于分析慢查询的原因,包括执行频率、数据量、查询消耗等。

    • myprofi:纯 php 写的一个开源分析工具.项目在 sourceforge 上。功能上,列出了总的慢查询次数和类型、去重后的 sql 语句、执行次数及其占总的 slow log 数量的百分比。从整体输出样式来看,比 mysql-log-filter 还要简洁,省去了很多不必要的内容。对于只想看 sql 语句及执行次数的用户来说,比较推荐。

    • mysql-log-filtergoogle code 上找到的一个分析工具,提供了 python 和 php 两种可执行的脚本。 特色功能除了统计信息外,还针对输出内容做了排版和格式化,保证整体输出的简洁。喜欢简洁报表的朋友,推荐使用一下。

    MySQL Innodb日志机制深入分析

    参考

    MySQL 日志管理
    MySQL学习:聊聊日志管理
    使用mysqlbinlog提取二进制日志

    今天关于《MySQL学习:聊聊日志管理》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!

    声明:本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
    相关阅读
    更多>
    最新阅读
    更多>
    课程推荐
    更多>
    评论列表