MySQL学习:聊聊日志管理
来源:SegmentFault
时间:2023-02-16 15:30:17 447浏览 收藏
亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《MySQL学习:聊聊日志管理》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下MySQL、日志,希望所有认真读完的童鞋们,都有实质性的提高。
参照:系统是CentOS6.4 ,MySQL版本为5.5.32
MySQL 服务器上一共有六种日志:错误日志,查询日志,慢查询日志,二进制日志,事务日志,中继日志。
一 错误日志
错误日志不仅仅记录错误信息,它记录的事件有:
- 服务器启动和关闭过程中的信息
- 服务器运行过程中的错误信息
- 事件调度器运行一个事件时产生的信息
- (如果被配置为从服务器)启动从服务器进程时产生的信息
查看错误日志文件的路径
在mysql数据库中,错误日志功能是默认开启的。
相关配置变量说明
只查看第一个binlog文件的内容(show binlog events)
查看指定binlog文件的内容(show binlog events in 'binname.xxxxx') 获取指定位置binlog的内容(show binlog events from xxx) 查看指定的binlog日志 按时间查看二进制日志 按字节数查看二进制日志 过滤insert、update操作 下面参考:使用mysqlbinlog提取二进制日志 在 my.cnf 中配置 清除所有日志( 清除指定日志之前的所有日志 清除某一时间点前的所有日志 清除 n 天前的所有日志 警告 出于性能和故障恢复的考虑,MySQL 服务器不会立即执行事务,而是先将事务记录在日志里面,这样可以将随机IO转换成顺序IO,从而提高IO性能。 事物日志通常是一组至少两个固定大小的文件,当其中一个写满时,MySQL会将事务日志写入另一个日志文件(先清空原有内容)。当 MySQL 从崩溃中恢复时,会读取事务日志,将其中已经 commit 的事务写入数据库,没有 commit 的事务 rollback 。 事务日志由存储引擎(innodb)管理,一般不需要手动干预。 中继日志用于主从复制架构中的从服务器上,从服务器的 slave 进程从主服务器处获取二进制日志的内容并写入中继日志,然后由 IO 进程读取并执行中继日志中的语句。 mysqldumpslowmysql:官方提供的慢查询日志分析工具 mysqlsla:hackmysql.com 推出的一款日志分析工具(该网站还维护了 mysqlreport,mysqlidxchk 等比较实用的mysql 工具)。 整体来说,功能非常强大。输出的数据报表非常有利于分析慢查询的原因,包括执行频率、数据量、查询消耗等。 myprofi:纯 php 写的一个开源分析工具.项目在 sourceforge 上。功能上,列出了总的慢查询次数和类型、去重后的 sql 语句、执行次数及其占总的 slow log 数量的百分比。从整体输出样式来看,比 mysql-log-filter 还要简洁,省去了很多不必要的内容。对于只想看 sql 语句及执行次数的用户来说,比较推荐。 mysql-log-filter:google code 上找到的一个分析工具,提供了 python 和 php 两种可执行的脚本。 特色功能除了统计信息外,还针对输出内容做了排版和格式化,保证整体输出的简洁。喜欢简洁报表的朋友,推荐使用一下。 MySQL 日志管理 今天关于《MySQL学习:聊聊日志管理》的内容介绍就到此结束,如果有什么疑问或者建议,可以在golang学习网公众号下多多回复交流;文中若有不正之处,也希望回复留言以告知!xml
mysql> show binlog events in 'mysql-bin.000002';
shell
mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00"
mysqlbinlog ../data/mysql-bin.000003 --stop-datetime="2015-3-12 17:30:00"
mysqlbinlog ../data/mysql-bin.000003 --start-datetime="2015-3-11 17:00:00" --stop-datetime="2015-3-12 17:30:00"
mysqlbinlog ../data/mysql-bin.000003 --start-position=20
mysqlbinlog ../data/mysql-bin.000003 --stop-position=200
mysqlbinlog ../data/mysql-bin.000003 --start-position=20 --stop-position=200
mysqlbinlog ../data/mysql-bin.000003 | grep insertII 查看binlog日志并输出
c、提取指定position位置的binlog日志并输出到压缩文件
# mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 |gzip >extra_01.sql.gz
d、提取指定position位置的binlog日志导入数据库
# mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 | mysql -uroot -p
e、提取指定开始时间的binlog并输出到日志文件
# mysqlbinlog --start-datetime="2014-12-15 20:15:23" /opt/data/APP01bin.000002 --result-file=extra02.sql
f、提取指定位置的多个binlog日志文件
# mysqlbinlog --start-position="120" --stop-position="332" /opt/data/APP01bin.000001 /opt/data/APP01bin.000002|more
g、提取指定数据库binlog并转换字符集到UTF8
# mysqlbinlog --database=test --set-charset=utf8 /opt/data/APP01bin.000001 /opt/data/APP01bin.000002 >test.sql
h、远程提取日志,指定结束时间
# mysqlbinlog -urobin -p -h192.168.1.116 -P3306 --stop-datetime="2014-12-15 20:30:23" --read-from-remote-server mysql-bin.000033 |more
i、远程提取使用row格式的binlog日志并输出到本地文件
# mysqlbinlog -urobin -p -P3606 -h192.168.1.177 --read-from-remote-server -vv inst3606bin.000005 >row.sql
expire_logs_days 参数
不存在主从复制关系)
mysql> PURGE MASTER LOGS TO 'mysql-bin.000003';
mysql> PURGE MASTER LOGS BEFORE CURRENT_DATE - INTERVAL 10 DAY;
由于二进制日志的重要性,请仅在确定不再需要将要被删除的二进制文件,或者在已经对二进制日志文件进行归档备份,或者已经进行数据库备份的情况下,才进行删除操作,且不要使用 rm 命令删除。
五 事务日志
六 中继日志
日志分析工具
MySQL Innodb日志机制深入分析
参考
MySQL学习:聊聊日志管理
使用mysqlbinlog提取二进制日志
-
499 收藏
-
432 收藏
-
485 收藏
-
244 收藏
-
235 收藏
-
475 收藏
-
266 收藏
-
273 收藏
-
283 收藏
-
210 收藏
-
371 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 立即学习 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 立即学习 507次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 立即学习 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 立即学习 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 立即学习 484次学习
-
- 开朗的手链
- 这篇技术贴出现的刚刚好,很详细,太给力了,mark,关注up主了!希望up主能多写数据库相关的文章。
- 2023-03-13 11:59:03
-
- 等待的大地
- 细节满满,收藏了,感谢大佬的这篇文章,我会继续支持!
- 2023-02-20 21:34:30
-
- 乐观的期待
- 这篇文章内容出现的刚刚好,好细啊,很有用,mark,关注作者大大了!希望作者大大能多写数据库相关的文章。
- 2023-02-20 08:24:12
-
- 优美的热狗
- 赞 👍👍,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢楼主分享博文!
- 2023-02-20 03:35:28
-
- 羞涩的秋天
- 写的不错,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢作者大大分享技术贴!
- 2023-02-17 16:40:54