【MySQL】日志详解

原创 已于 2024-06-13 15:44:21 修改 · 1.2k 阅读 · 16 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mysql #数据库

于 2024-06-13 15:42:48 首次发布

本文使用的MySQL版本是8

日志概览

它们记录了数据库系统中的不同操作和事件，以便于故障排除、性能优化和数据恢复。本文将介绍MySQL中常见的几种日志，同时也会介绍一点常用的选项。

官方文档：MySQL :: MySQL 8.0 Reference Manual :: 7.4 MySQL Server Logs

相关说明

  • 默认情况下，在上面的日志中，Windows环境下只开启 错误日志。Linux开启 错误日志 和 二进制日志。
  • 服务器运行期间，可以控制一般查询日志和慢查询日志的开启，也可以更改其日志文件名。
  • 刷新日志：在MySQL客户端下执行 flush logs 将会把所有开启的日志都关闭，并打开新的日志文件方便我们查看最新的日志。或者使用mysqladmin工具并带有flush-logs或refresh参数、或者使用mysqldump工具并带有--flush-logs选项时，就会触发日志刷新的操作。 

配置日志 

这里以配置错误日志的路径为例：

对于Windows：

对于Linux：

修改路径：

找到配置文件，如果不知道在哪，查看http://t.csdnimg.cn/dZJZJ文章中的选项配置文件部分

修改log-error部分的值。如果只有文件名，数据就是默认的数据目录，自行添加为要修改的目录即可。

其他配置也都是一样的。

错误日志(Error Log)

错误日志包含 mysqld 启动和关闭时间的记录。它还包含在服务器启动和关闭期间以及在服务器运行期间发生的错误、警告和注释等诊断消息。例如，如果 mysqld 注意到需要自动检查或修复某个表，它将向错误日志写入一条消息。

根据错误日志配置的不同，错误消息还可以填充 Performance Schema error _ log 表，为日志提供 SQL 接口并允许查询其内容。

在某些操作系统上，如果 mysqld 异常退出，错误日志将包含堆栈跟踪。跟踪可用于确定 mysqld 退出的位置。

如果用于启动 mysqld，mysqld _ safe 可以将消息写入错误日志。例如，当 mysqld _ safe 注意到 mysqld 退出异常时，它重新启动 mysqld 并将 mysqld 重新启动的消息写入错误日志。

官方文档：MySQL :: MySQL 8.0 Reference Manual :: 7.4.2 The Error Log

错误日志字段

错误代码参考官方文档：MySQL :: MySQL 8.0 Reference Manual :: 29.12.20.11 Error Summary Tables 

MySQL :: MySQL 8.0 Error Reference :: 4 Global Error Message Reference

一般查询日志(General Query Log)

一般查询日志记录客户端连接或断开连接的信息，同时记录从客户端接收的每个SQL语句。由于开启这样的记录会产生大量内容，非常耗费服务器资源，因此默认情况下是关闭的。

一般查询日志通常用于性能分析、安全审计和故障排除。通过分析一般查询日志，可以了解数据库系统的运行状况，检测潜在的性能瓶颈，并对数据库访问进行监控和审计。此外，一般查询日志还可以帮助数据库管理员追踪特定用户或应用程序对数据库的访问情况，以及识别潜在的安全威胁和异常行为。

 官方文档：MySQL :: MySQL 8.0 Reference Manual :: 7.4.3 The General Query Log

保存为文件或表

对于一般查询日志和慢查询日志，除了可以保存成一般的日志文件，mysql中还为这两个日志提供了数据表，所以也可以把数据存到表中。

可以选择都选择。使用表查看可以用条件查询，比较方便。 可以通过客户端程序连接到服务器并查询表中的日志信息，无需登录服务器主机访问文件系统。

查看保存选项

设置保存选项

SET GLOBAL log_output='[FILE, TABLE, NONE]';

查看表

慢查询日志(Slow Query Log)

慢查询日志由执行时间超过系统变量 long_query_time 指定的秒数的 SQL 语句组成，并且检查的行数大于系统变量 min_examined_row_limit 指定的值。被记录的慢查询需要进行优化，可以使用 mysqldumpslow 客户端程序对慢查询日志进行分析汇总。

需要注意的是，获取初始锁的时间不计入执行时间，MySQL 在执行完 SQL 语句并释放所有锁后才将符合条件的语句写入慢速查询日志，因此日志顺序可能与执行顺序不同。

官方文档：MySQL :: MySQL 8.0 Reference Manual :: 7.4.5 The Slow Query Log

慢查询日志参数

查看文件或表

查看文件

启用慢查询日志并将输出目标设置为FILE时，每条语句前面用一行来表示日志的字段

# Query_time: SQL语句的执行时间，单位秒
# Lock_time: 获取锁的时间，单位秒
# Rows_sent: 发送到客户端的行数
# Rows_examined: 服务器检查的行数


# 开启了--log-slow-extra还会有下面的内容

# Thread_id: 线程标识符
# Errno: 错误码，没有发生错误则为0
# Killed: 如果语句被终止，用错误码表示原因，如果语句正常终止则为0
# Bytes_received: 接收到SQL语句的Bytes值
# Bytes_sent: 返回给客户端的Byte值
# Read_first: 索引中第一个条目被读取的次数，如果这个值很高，表明服务器正在执行大量完整索引扫描
# Read_last: 读取索引中最后一个键的请求数，使用 ORDER BY 时关注
# Read_key: 基于索引读取一行数据的请求数。如果这个值很高，表明表为当前查询建立了正确的索引
# Read_next: 按索引排序读取下一行的请求数，查询具有范围约束的索引列，或者进行索引扫描，此值将递增
# Read_prev: 按索引排序读取前一行的请求数。主要用于优化ORDER BY DESC
# Read_rnd: 基于固定位置读取一行的请求数。这个值很高表明，正在执行大量需要对结果进行排序的查询，可能有很多查询进行了全表扫描整，或者没有正确使用索引的连接
# Read_rnd_next: 读取数据文件中下一行的请求数。如果进行大量的表扫描，这个值会很高。通常，表明表没有建立正确地索引，或者查询没有利用索引
# Sort_merge_passes: 排序算法完成的归并次数，如果这个值很大，考虑增加sort_buffer_size系统变量的值
# Sort_range_count: 使用范围进行排序的次数
# Sort_rows: 排序的行数
# Sort_scan_count: 通过扫描表完成的排序数
# Created_tmp_disk_tables: 服务器在执行语句时创建内部磁盘临时表的数量
# Created_tmp_tables: 服务器在执行语句时创建的内部临时表的数量
# Start: 执行SQL语句开始时间
# End: 执行SQL语句结束时间

查看表

表结构如下

二进制日志(Binary Log)

二进制日志是用来记录数据库中增加，修改，删除操作的日志，不会记录查询等相关操作。保存的内容为二进制的，能够高效的记录操作。

作用：

  • 数据恢复：记录了相关的操作或者数据就可以用来恢复数据。
  • 主从节点数据复制：从节点读取主节点上的二进制数据并执行用来同步更新数据。

官方文档：MySQL :: MySQL 8.4 Reference Manual :: 7.4.4 The Binary Log

常见选项和变量

show variables like "%bin%";

可以使用 log_bin

二进制日志文件

二进制日志文件名由基本名加上数字扩展名组成，确保文件系列是有序的。

默认存储位置是数据目录。

二进制日志文件更新：

  • 服务器启动
  • 服务器重新启动
  • 刷新服务器日志
  • 日志大小达到max_binlog_size(单个日志文件最大字节数，最小可以设定为 4096字节，最大值和默认值都是1GB   不过如果是在记录事务的时候超出了设定的最大值，这个文件可以超过这个值，也要记录一个完整的事务在文件中)

日志索引文件：

默认情况下，这个索引文件与二级制文件名字大体上相同。就是上图的index文件。可以使用 --log-bin-index修改索引名。

修改日志目录：

使用log-bin=绝对路径+文件名 来修改目录。

二进制日志格式

  • 基于语句：默认记录格式。记录每次执行的sql。但是当MySQL认为基于语句不能保证数据一致时，就会自动切换到基于行的日志记录。使用 binlog-format=statement 来设定。
  • 基于行：记录每一行的数据。
  • 混合：使用语句和行的格式来记录。

禁用二进制日志

不建议禁用！！！

默认情况下，MySQL启用了二进制日志（Binary Log），这是通过将系统变量log_bin设置为ON来实现的。二进制日志记录了数据库中的更新操作，如插入、更新和删除操作。

如果要禁用二进制日志，可以使用--skip-log-bin或--disable-log-bin选项。这两个选项的作用是相同的，它们会覆盖默认设置，使MySQL不再生成二进制日志。

需要注意的是，如果同时指定了--log-bin选项和禁用二进制日志的选项（--skip-log-bin或--disable-log-bin），后面指定的选项会优先生效。也就是说，如果在启动MySQL时同时指定了--log-bin和--skip-log-bin选项，那么二进制日志将被禁用。

操作二进制日志

对于二进制文件的操作，MySQL给我们提供了mysqlbinlog.exe程序。

具体的操作看http://t.csdnimg.cn/YFc9b 文章中的 mysqlbinlog 部分。

这边查看一下二进制内容

中继日志(Relay Log)

后续完成。

DDL日志(Metadata Log)

在MySQL8的文档中DDL只是提了一下。

而参考文档还是5.7版本的

DDL 日志总是在需要时自动创建，并且没有用户可配置的选项。所以这里就不在多介

回滚日志(Undo Log)

Undo日志记录了对数据库进行修改的操作的逆操作（即相反的操作），以便在事务回滚或数据库恢复时撤销对数据的修改。
当一个事务执行修改操作（例如插入、更新、删除）时，相关的旧数据会被存储到Undo日志中。
Undo日志对于实现数据库的一致性非常重要，因为它提供了回滚事务的能力，使得可以撤销未完成或出错的事务。
Undo日志通常使用多版本并发控制（MVCC）来支持并发事务，每个事务都有自己的undo日志。

后续详细讲解。

重做日志(Redo Log)

Redo日志记录了对数据库进行修改的操作，以便在数据库恢复时重新执行这些操作，保证数据的持久性。
当一个事务提交时，相关的修改操作会被记录到Redo日志中。
Redo日志对于数据库的可靠性和持久性非常重要，因为它可以确保在数据库崩溃或意外断电的情况下，将事务的已提交修改重新应用到数据库中，使得数据库能够完全恢复到最近一次正常关闭时的状态。
Redo日志通常采用顺序写入方式，以提高性能和减少I/O开销。

后续详细讲解。

windows下mysql5.6.x的日志正确配置方法(my.ini)
databatman的工厂
11-20 1万+
网上流传的日志配置版本绝大部分都是5.6以前的，使用该种配置之后启动mysql会报错1067服务器关闭。本文提供了5.6以后的各种日志的正确配置法。
MySQL日志详解
程序员世杰
03-24 624
MySQL 中有六种日志文件， 分别是：重做日志（redo log）、回滚日志（undo log）、二进制日志（binlog）、错误日志（errorlog）、慢查询日志（slow query log）、一般查询日志（general log），中继日志（relay log）。 其中 重做日志和回滚日志与事务操作息息相关， 二进制日志也与中继日志通常用于主从复制 错误日志是记录数据库故常 ...
寻找Windows下MySQL的错误日志
热门推荐
dreamcs的专栏
12-07 3万+
MySQL版本:5.6 Windows版本:Win7 64 MySQL的错误日志记录了MySQL服务器启动、关闭和运行时出错等信息。默认名称为host_name.err，保存在MySQL实例指定的data目录下。但在MySQL的安装目录下的data目录并没有此文件。 查看错误日志的路径： 发现是相对路径。不能定位此文件在哪个目录下。 我的MySQL以服务方式启动。
Windows下MySQL日志基本的查看以及导入导出用法教程
12-15
MYSQL有不同类型的日志文件(各自存储了不同类型的日志)，从它们当中可以查询到MYSQL里都做了些什么，对于MYSQL的管理工作，这些日志文件是不可缺少的。 1.错误日志(The error log)：记录了数据库启动、运行以及停止过程中错误信息； 2.ISAM操作日志(The isam log)：记录了所有对ISAM表的修改，该日志仅仅用于调试ISAM模式； 3.SQL执行日志(The query log)：记录了客户端的连接以及所执行的SQL语句； 4.更新日志(The update log)：记录了改变数据的语句，已经不建议使用，由二进制日志替代； 5.二进制日志(The binary
Windows下MySQL日志操作
crazy12231的博客
11-10 767
日志文件类型概述： 1．错误日志 记录启动、运行或停止mysqld时出现的问题。My.ini配置信息：#Enter a name for the error log file. Other...
windows mysql 日志_Windows系统如何设置MySQL日志
weixin_36227730的博客
01-18 285
如何开启windowsmysql日志与查询功能？请看本文吧。修改 my.ini文件加入以下语句(在没有设置的前提下)log-error=d:/log/mysql/mysql_log_err.txtlog=d:/log/mysql/mysql_log.txt#log-bin=d:/log/mysql/mysql_log_binlog-slow-queries= d:/log/mysql/mysql_...
MySQL 日志详解（超详细）
03-17
MySQL日志系统是数据库管理的重要组成部分，它记录了数据库的各种操作和事件，为故障排查、性能优化、数据恢复等提供了重要参考。以下是对MySQL日志的详细解析： 1. 错误日志（Error Log） MySQL的错误日志记录了...
MySQL日志管理详解
09-10
MySQL日志管理是数据库系统维护和优化的重要环节，它提供了对服务器运行状态的详细记录，帮助管理员监控数据库健康状况、追踪错误、优化性能以及实现数据恢复。MySQL中有六种主要的日志类型，每种都有其特定的功能和...
【数据库-MySQL】mysql日志详解及性能优化
jc.wang的博客
07-07 809
mysql日志分为四大类：慢查询日志，查询日志，错误日志，二进制日志 一.慢查询日志：大于慢查询时间的语句，都会记录在慢查询日志中 1.查看慢查询是否开启 show variables like "slow_query_log"; 如下：slow_query_log: ON/OFF slow_query_log_file:慢查看日志名称:slow.log 2.开启慢查询 set global slow_query_log='ON'; 3.查看慢查询时间 show variables..
Windows下的Mysql日志操作
hzcyclone的专栏
08-13 1266
<br />日志文件类型概述：    <br />1．<br />错误日志   记录启动、运行或停止mysqld时出现的问题。<br />My.ini配置信息：<br />#Enter a name for the error log file.   Otherwise a default name will be used.<br />#log-error=d:/mysql_log_err.txt<br />2．<br />查询日志    记录建立的客户端连接和执行的语句。<br />My.ini配置信息
MySQL日志
2502_92656182的博客
08-14 1294
日志分类1.错误日志①作用：记录MySQL服务器启动、运行、关闭过程中的关键事件，包括：服务启动/关闭的详细信息严重错误（如权限不足、内存溢出、表损坏）警告信息（如配置参数不推荐使用）②配置方法错误日志默认强制开启，无需手动启用，仅需配置存储路径。
MYSQL-binlog日志（windows10+mysql5.7）
皮克托先生的博客才对
12-13 3174
server_id是设置服务器的ID，可自定义数值*log_bin=mysql-bin 启动二进制日志binlog，并指定日志的文件名前缀为mysql-bin。
win mysql 错误日志_怎么查看mysql的错误日志
weixin_39524439的博客
01-21 1095
错误日志文件包含了当mysqld启动和停止时，以及服务器在运行过程中发生任何严重错误时的相关信息。可以用--log-error[=file_name]选项来指定mysqld保存错误日志文件的位置。如果没有给定file_name值，mysqld使用错误日志名host_name.err(host_name为主机名)并在数据目录(DATADIR)中写入日志文件。MySQL的错误信息是在data目录下的，...
mysql 日志
一路向前
04-26 3238
慢查询日志主要用来记录查询时间较长的日志。在开发环境下，可以开启慢查询日志来记录查询时间较长的查询语句，然后对这些语句进行优化。通过配置long_query_time的值，可以灵活地掌握不同程度的慢查询语句
MySql在Windows下查看日志
m0_37996243的博客
09-29 6347
大体记录mysql查看日志的方法，并不具体： 1.查看是否开启了日志 show variables like 'log_bin'; value是ON表示已开启，如果没开启执行第二步； 2.开启日志 在mysql的配置文件mysql.ini中的[mysqld]下面增加语句 log-bin=mysql-bin 后，重启mysql； 3.查看日志（只能查看开启后的日志，之前的没有开启...
windows下开启mysql日志
yuguang的博客
07-16 1345
目录 1.查看日志开启情况 2.mysql服务开启和关闭操作 2.1.服务中操作 2.2.命令行操作 3.开启binlog 3.1配置my.ini为默认日志路径 3.2配置my.ini为自定义日志路径 4.最后查看 1.查看日志开启情况 windows中默认情况下是不开启的。 show variables like 'log_bin%'; 2.mysql服务开启和关闭操作 2.1.服务中操作 2.2.命令行操作 3.开启binlo...
Mysql实现定时自动清理日志（Windows环境）
chengxuyuan316的博客
12-02 1112
Mysql自动清理日志文件
stl文件用proe怎么打开_3dmax怎么导入stl文件？如何将proe的文件导入3dmax进行渲染？...
weixin_39588209的博客
12-19 5273
我们都知道3dmax是无法直接打开stp文件的，因为proe自带的渲染器渲染效果比较差。所以很多人想将proe文件导入3dmax来渲染，那么怎么导入proe文件到3dmax呢？接下来就来揭晓答案。1、首先打开proe，然后打开一个实体文件2、要让proe的文件直接导入3dmax，需要用proe另存为一个stl格式的文件。3、点击ok，然后会弹出一个stl的参数面板。4、在chord height一...
【MySQL高级】MySQL的日志
dzqxwzoe的博客
12-07 2351
二进制日志（BINLOG）记录了所有的 DDL（数据定义语言）语句和 DML（数据操纵语言）语句，但是不包括数据查询语句。此日志对于灾难时的数据恢复起着极其重要的作用，MySQL的主从 ， 就是通过该binlog实现的。二进制日志，MySQl8.0默认已经开启，低版本的MySQL的需要通过配置文件开启，并配置MySQL日志的格式。Windows系统：my.ini Linux系统:my.cnf。
mysql日志详解
最新发布
11-21
<think> 嗯，用户想要详细了解MySQL日志的解析。从引用内容看，MySQL主要有事务日志、二进制日志、错误日志、查询日志和慢查询日志这几类。用户可能是DBA或者开发人员，需要全面了解日志机制来优化数据库或排查问题。 用户引用的资料已经比较全面了，但需要更系统地整理。特别是引用[2]中提到的innodb_flush_log_at_trx_commit参数配置很关键，这直接影响到事务持久性和性能平衡。用户应该很关心实际运维中的配置建议。 考虑到用户的技术背景，准备详细解释每种日志的机制时，会补充一些底层原理。比如InnoDB事务日志的write-ahead logging机制，以及二进制日志的三种格式差异。用户可能还需要知道如何根据业务场景配置日志参数，比如高并发时怎么平衡安全和性能。 注意到引用[4]提供了优化案例和最佳实践，这个很实用。会在回复中加入类似的场景化建议，比如磁盘空间不足时的日志清理策略。用户可能遇到过慢查询导致的问题，所以慢日志分析部分要强调pt-query-digest工具的使用。 回复结构上，准备按日志类型分类说明，每类包含作用、配置和运维要点。最后补充一个配置表格，方便用户快速查阅。用户似乎更关注实际应用而非理论，所以优化建议会具体到参数设置和命令行操作。 </think>以下是MySQL日志系统的详细解析，结合核心功能与运维实践进行说明： --- ### 一、MySQL核心日志类型 1. **事务日志 (InnoDB Redo Log)** - **作用**：确保事务的持久性（ACID中的D），记录物理页修改（`ib_logfile0/1`） - **关键配置**： ```sql SHOW GLOBAL VARIABLES LIKE 'innodb_log%'; ``` - `innodb_log_file_size`：单个日志文件大小（建议设置为1-2GB） - `innodb_log_files_in_group`：日志文件数量（默认2） - `innodb_flush_log_at_trx_commit`： - `=1`：每次事务提交刷盘（最安全，性能最低）[^2] - `=2`：每秒刷盘（可能丢失1秒数据） - `=0`：依赖OS刷盘（风险最高） - **恢复机制**：崩溃重启时通过重放redo log恢复未写入数据文件的事务 2. **二进制日志 (Binlog)** - **作用**：记录所有**数据变更语句**（DDL/DML），用于主从复制和数据恢复 - **三种格式**： | 格式 | 特点 | 示例 | |---------------|-----------------------------|--------------------------| | STATEMENT | 记录SQL语句，日志量小 | `UPDATE users SET age=30` | | ROW(推荐) | 记录行数据变化，安全可靠 | 记录`id=1`的age从25→30 | | MIXED | 混合模式，自动切换 | | - **运维命令**： ```sql -- 查看日志状态 SHOW MASTER STATUS; -- 手动刷新日志 FLUSH LOGS; ``` 3. **错误日志 (Error Log)** - **定位路径**： ```sql SHOW VARIABLES LIKE 'log_error'; ``` - **记录内容**： - 服务启动/停止信息 - 严重错误（如崩溃、表损坏） - 事件调度器运行信息 4. **查询日志 (General Query Log)** - **启用方式**（生产环境慎用）： ```sql SET GLOBAL general_log = ON; SET GLOBAL log_output = 'TABLE'; -- 输出到mysql.general_log表 ``` 5. **慢查询日志 (Slow Query Log)** - **阈值设置**： ```sql -- 超过2秒的查询 SET GLOBAL long_query_time = 2; -- 记录未使用索引的查询 SET GLOBAL log_queries_not_using_indexes = ON; ``` - **分析工具**： ```bash mysqldumpslow -s t /var/log/mysql-slow.log pt-query-digest /var/log/mysql-slow.log ``` --- ### 二、日志管理最佳实践 1. **安全与性能平衡** ```sql /* 推荐生产环境配置 */ SET GLOBAL innodb_flush_log_at_trx_commit = 1; -- ACID严格保障 SET GLOBAL sync_binlog = 1; -- Binlog每次提交刷盘 SET GLOBAL expire_logs_days = 7; -- Binlog保留7天 ``` 2. **磁盘空间优化** - **日志轮转策略**（示例配置`/etc/logrotate.d/mysql`）： ```conf /var/log/mysql/mysql-slow.log { daily rotate 30 compress delaycompress missingok notifempty postrotate mysqladmin flush-logs endscript } ``` 3. **故障排查案例** - **场景**：磁盘空间不足 ```bash # 查找大日志文件 du -h /var/lib/mysql | sort -rh | head -n 10 # 清理旧Binlog（慎用！） PURGE BINARY LOGS BEFORE '2023-01-01'; ``` --- ### 三、关键配置速查表 | 日志类型 | 配置项 | 推荐值 | 影响 | |----------------|--------------------------------|-------------|--------------------| | **事务日志** | `innodb_flush_log_at_trx_commit` | 1(金融)/2(业务) | 数据安全 vs 写入性能 | | **Binlog** | `sync_binlog` | 1 | 主从数据一致性 | | **慢查询日志** | `long_query_time` | 0.5-2秒 | 捕获性能瓶颈 | | **通用日志** | `general_log` | OFF | 避免性能开销 | > **注**：高并发场景下，`innodb_flush_log_at_trx_commit=1`可能造成I/O瓶颈，可通过以下方案缓解： > 1. 使用SSD提升磁盘IOPS > 2. 增加`innodb_log_buffer_size`（默认16MB→64MB） > 3. 组提交（Group Commit）优化[^4] ---
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值