18.MySQL日志文件

十八、MySQL日志文件

1、错误日志

1.1、日志作用

错误日志是 MySQL 中最重要的日志之一,它记录了当 mysqld 启动、停止、以及服务器在运行过程中发生任何严重错误时的相关信息

当数据库出现任何故障导致无法正常使用时,建议首先查看此日志

1.2、默认日志文件

该日志是默认开启的,默认位置是var/log/mysqld.log

查看日志位置

show variables like '%log_error%';

1.3、测试示例

修改/var/lib/mysql/auto.cnf文件,该文件记录的是server-uuid

cat /var/lib/mysql/auto.cnf

这里随意修改其值,比如删掉末尾的85

修改完以后重启mysql服务器

# 重启mysql服务器

systemctl restart mysqld

查看错误日志文件

tail -100f /var/log/mysqld.log

测试完后恢复auto.cnf文件

2、二进制日志

2.1、日志简介

二进制日志(BINLOG)记录了所有的 DDL(数据定义语言)语句和 DML(数据操纵语言)语句,但不包括数据查询(SELECT、SHOW)语句

2.2、日志作用

①. 灾难时的数据恢复

②. MySQL的主从复制

2.3、查看日志文件

(1)、日志文件配置

在MySQL8版本中默认二进制日志是开启着的,涉及到的参数如下

show variables like '%log_bin%';

说明

log_bin_basename:当前数据库服务器的binlog日志的基础名称(前缀),具体的binlog文件名需要再该basename的基础上加上编号(编号从000001开始)log_bin_index:binlog的索引文件,里面记录了当前服务器关联的binlog文件有哪些查看日志文件

(2)、查看索引文件

查看文件

tail -100f /var/lib/mysql/binlog.index

2.4、日志查看

由于日志是以二进制方式存储的,不能直接读取,需要通过二进制日志查询工具 mysqlbinlog 来查看

语法格式

mysqlbinlog [ 参数选项 ] logfilename

参数选项:

-d 指定数据库名称,只列出指定的数据库相关操作。

-o 忽略掉日志中的前n行命令。

-v 将行事件(数据变更)重构为SQL语句

-vv 将行事件(数据变更)重构为SQL语句,并输出注释信息

测试

mysqlbinlog -v /var/lib/mysql/binlog.000007

2.5、日志文件格式

2.5.1、日志格式

MySQL服务器中提供了多种格式来记录二进制日志,具体格式及特点如下

2.5.2、查看日志配置

show variables like '%binlog_format%';

如果需要配置二进制日志的格式,只需要在 /etc/my.cnf 中配置 binlog_format 参数即可

2.5.3、测试日志配置

2.5.3.1、ROW

二进制日志的默认配置格式

(1)、测试过程

创建数据库表

drop table if exists stu;

create table stu(

id int ,

name varchar(10),

age int

);

插入数据

insert into stu values(1,'zhangsan1',1);

insert into stu values(2,'zhangsan2',2);

insert into stu values(3,'zhangsan3',3);

insert into stu values(4,'zhangsan4',4);

insert into stu values(5,'zhangsan5',5);

更新数据

update stu set name='Tom' where id<=3;

(2)、查看日志文件

注意:不需要登录mysql客户端

mysqlbinlog -d test -v /var/lib/mysql/binlog.000007;

2.5.3.2、STATEMENT

(1)、修改配置

修改/etc/my.cnf 中配置 binlog_format 参数为STATEMENT

# 编辑配置文件

vi /etc/my.cnf

# 添加如下配置

[mysqld]

binlog_format =statement

重启服务器

# 重启mysql服务器

systemctl restart mysqld

(2)、测试配置

准备数据

drop table if exists stu;

create table stu(

id int ,

name varchar(10),

age int

);

insert into stu values(1,'zhangsan1',1);

insert into stu values(2,'zhangsan2',2);

insert into stu values(3,'zhangsan3',3);

insert into stu values(4,'zhangsan4',4);

insert into stu values(5,'zhangsan5',5);

update stu set name='Tom' where id<=3;

查看日志

mysqlbinlog -d test -v /var/lib/mysql/binlog.000008;

2.5.3.3、MIXED

MIXED格式是STATEMENT和ROW的混合体

默认采用STATEMENT格式,某些情况下会自动切换为ROW进行记录

配置过程参考STATEMENT配置

2.6、日志删除

对于比较繁忙的业务系统,每天生成的binlog数据巨大,如果长时间不清除,将会占用大量磁盘空间

2.6.1、删除方式

(1)、手动清理方式

可以通过以下几种方式清理日志

删除所有二进制日志

删除全部binlog日志,删除之后日志编号将从binlog.000001重新开始

新版本

RESET BINARY LOGS AND GTIDS

旧版本

reset master

删除指定编号之前的日志

删除*编号之前的所有日志(不包括该日志)

新版本

RESET BINARY LOGS AND GTIDS to 000001;

或者

purge binary logs to 'binlog.*';

旧版本

purge master logs to 'binlog.*';

删除指定日期前的日志

删除日志为yyyy-mm-dd hh24:mi:ss之前产生的所有日志

新版本

purge binary logs before 'yyyy-mm-dd hh24:mi:ss';

旧版本

purge master logs before 'yyyy-mm-dd hh24:mi:ss';

(2)、自动清理方式

可以在mysql的配置文件中配置二进制日志的过期时间,设置了之后二进制日志过期会自动删除

show variables like '%binlog_expire_logs_seconds%';

可以在/etc/my.cnf文件中配置

2.6.2、删除测试

先查看所有的二进制日志文件

ll /var/lib/mysql/binlog.*

测试purge binary logs to ‘binlog.*’;

PURGE BINARY LOGS TO 'binlog.000002';

测试purge binary logs before ‘2025-03-12 07:56:00’;

purge binary logs before '2025-03-12 07:56:00';

测试RESET BINARY LOGS AND GTIDS

3、查询日志

查询日志中记录了客户端的所有操作语句,而二进制日志不包含查询数据的SQL语句

默认情况下,查询日志是未开启的

3.1、查看日志文件

show variables like '%general%';

3.2、开启查询日志

修改配置

如果需要开启查询日志可以修改MySQL的配置文件 /etc/my.cnf 文件,添加如下内容

#该选项用来开启查询日志,可选值: 0 或者 1;

# 0 代表关闭;1 代表开启

general_log=1

#设置日志的文件名,如果没有指定则默认的文件名为 host_name.log

general_log_file=mysql_query.log

重启服务器

# 重启mysql服务器

systemctl restart mysqld

开启了查询日志之后,在MySQL的数据存放目录,也就是 /var/lib/mysql/ 目录下就会出现mysql_query.log 文件

之后所有的客户端的增删改查操作都会记录在该日志文件之中,长时间运行后,该日志文件将会非常大

3.3、测试日志文件

执行测试脚本

drop table if exists stu;

create table stu(

id int ,

name varchar(10),

age int

);

insert into stu values(1,'zhangsan1',1);

insert into stu values(2,'zhangsan2',2);

insert into stu values(3,'zhangsan3',3);

insert into stu values(4,'zhangsan4',4);

insert into stu values(5,'zhangsan5',5);

update stu set name='Tom' where id<=3;

select * from stu;

查看日志文件

cat /var/lib/mysql/mysql_query.log

4、慢查询日志

4.1、日志简介

慢查询日志记录了所有执行时间超过参数 long_query_time 设置值并且扫描记录数不小于min_examined_row_limit 的所有的SQL语句的日志,默认未开启

4.2、日志位置

默认日志文件位置为/var/lib/mysql/xxxxx-slow.log

4.3、开启日志

开启慢日志

如果需要开启慢查询日志,需要在MySQL的配置文件 /etc/my.cnf 中配置如下参数

long_query_time 默认为10 秒,最小为 0, 精度可以到微秒

#慢查询日志

slow_query_log=1

#执行时间参数

long_query_time=2

开启管理语句

默认情况下,不会记录管理语句,也不会记录不使用索引进行查找的查询

可以使用log_slow_admin_statements和 更改此行为 log_queries_not_using_indexes,如下所述

#记录执行较慢的管理语句

log_slow_admin_statements =1

#记录执行较慢的未使用索引的语句

log_queries_not_using_indexes = 1

配置完毕之后重启服务器

# 重启mysql服务器

systemctl restart mysqld

4.4、测试慢查询

执行脚本文件

drop table if exists stu;

create table stu(

id int ,

name varchar(10),

age int

);

insert into stu values(1,'zhangsan1',1);

insert into stu values(2,'zhangsan2',2);

insert into stu values(3,'zhangsan3',3);

执行慢查询SQL

# 慢查询sql

select *,sleep(3) from stu;

4.5、查看日志

语法如下

cat /var/lib/mysql/xxxxx-slow.log