• MySQL日志详解(下篇)


    上篇我们讲了错误日志和二进制日志(Mysql日志上篇),下篇继续介绍其他类型日志

    1.MySQL通用查询日志(General Query Log)

    通用查询日志(General Query Log)用来记录用户的所有操作,包括启动和关闭 MySQL 服务、更新语句和查询语句等。

    默认情况下,通用查询日志功能是关闭的。可以通过以下命令查看通用查询日志是否开启,命令如下:

    mysql> SHOW VARIABLES LIKE '%general%';
    +------------------+----------------------------------------------------------------+
    | Variable_name    | Value                                                          |
    +------------------+----------------------------------------------------------------+
    | general_log      | OFF                                                            |
    | general_log_file | C:ProgramDataMySQLMySQL Server 5.7DataLAPTOP-UHQ6V8KP.log |
    +------------------+----------------------------------------------------------------+
    2 rows in set, 1 warning (0.01 sec)

    从结果可以看出,通用查询日志是关闭的,general_log_file 变量指定了通用查询日志文件所在的位置。

    启动和设置通用查询日志

    在 MySQL 中,可以通过在 MySQL 配置文件添加 log 选项来开启通用查询日志,格式如下:

    [mysqld]
    log=dir/filename

    其中,dir 参数指定通用查询日志的存储路径;filename 参数指定日志的文件名。如果不指定存储路径,通用查询日志将默认存储到 MySQL 数据库的数据文件夹下。如果不指定文件名,默认文件名为 hostname.log,其中 hostname 表示主机名。

    查看通用查询日志

    如果希望了解用户最近的操作,可以查看通用查询日志。通用查询日志以文本文件的形式存储,可以使用普通文本文件查看该类型日志内容。

    例 1

    首先我们查看通用查询日志功能是否是开启状态,然后查询 tb_student 表的记录,SQL 命令和执行过程如下:

    mysql> SHOW VARIABLES LIKE '%general%';
    +------------------+----------------------------------------------------------------+
    | Variable_name    | Value                                                          |
    +------------------+----------------------------------------------------------------+
    | general_log      | ON                                                             |
    | general_log_file | C:ProgramDataMySQLMySQL Server 5.7DataLAPTOP-UHQ6V8KP.log |
    +------------------+----------------------------------------------------------------+
    2 rows in set, 1 warning (0.02 sec)
    
    mysql> use test;
    Database changed
    mysql> SELECT * FROM tb_student;
    +----+--------+
    | id | name   |
    +----+--------+
    |  1 | Java   |
    |  2 | MySQL  |
    |  3 | Python |
    +----+--------+
    3 rows in set (0.06 sec)

    执行成功后,打开通用查询日志,这里日志名称为 LAPTOP-UHQ6V8KP.log,下面是通用查询日志中的部分内容。

    C:Program FilesMySQLMySQL Server 5.7inmysqld.exe, Version: 5.7.29-log (MySQL Community Server (GPL)). started with:
    TCP Port: 3306, Named Pipe: MySQL
    Time                 Id Command    Argument
    2020-05-29T06:43:44.382878Z     7 Quit
    2020-05-29T06:44:10.001382Z     8 Connect root@localhost on  using SSL/TLS
    2020-05-29T06:44:10.007532Z     8 Query select @@version_comment limit 1
    2020-05-29T06:44:11.748179Z     8 Query SHOW VARIABLES LIKE '%general%'
    2020-05-29T06:44:25.487472Z     8 Query SELECT DATABASE()
    2020-05-29T06:44:25.487748Z     8 Init DB test
    2020-05-29T06:44:35.390523Z     8 Query SELECT * FROM tb_student
    View Code

    可以看出,该日志非常清晰地记录了客户端的所有行为。

    停止通用查询日志

    通用查询日志启动后,可以通过两种方法停止该日志。一种是将 MySQL 配置文件中的相关配置注释掉,然后重启服务器,来停止通用查询日志。具体内容如下:

    [mysqld]
    #log=dirfilename

    上述方法需要重启 MySQL 服务器,这在某些场景,比如有业务量访问的情况下是不允许的,这时可以通过另一种方法来动态地控制通用查询日志的开启和关闭。

    设置 MySQL 的环境变量 general_log 为关闭状态可以停止该日志,示例如下:

    mysql> SET GLOBAL general_log=off;
    Query OK, 0 rows affected (0.00 sec)
    
    mysql> SHOW VARIABLES LIKE '%general_log%' G
    *************************** 1. row ***************************
    Variable_name: general_log
            Value: OFF
    *************************** 2. row ***************************
    Variable_name: general_log_file
            Value: C:ProgramDataMySQLMySQL Server 5.7DataLAPTOP-UHQ6V8KP.log
    2 rows in set, 1 warning (0.01 sec)

    删除通用查询日志

    在 MySQL 中,可以使用 mysqladmin 命令来开启新的通用查询日志。新的通用查询日志会直接覆盖旧的查询日志,不需要再手动删除了。

    mysqladmin 命令的语法如下:

    mysqladmin -uroot -p flush-logs

    需要注意的是,如果希望备份旧的通用查询日志,必须先将旧的日志文件拷贝出来或者改名。然后,再执行 mysqladmin 命令。

    除了上述方法之外,还可以手工删除通用查询日志。删除之后需要重新启动 MySQL 服务。重启之后就会生成新的通用查询日志。如果希望备份旧的日志文件,可以将旧的日志文件改名,然后重启 MySQL 服务。

    由于通用查询日志会记录用户的所有操作,如果数据库的使用非常频繁,通用查询日志将会占用非常大的磁盘空间,对系统性能影响较大。一般情况下,数据管理员可以删除很长时间之前的通用查询日志或关闭此日志,以保证 MySQL 服务器上的硬盘空间。

    2.MySQL慢查询日志(Slow Query Log)

    慢查询日志用来记录在 MySQL 中执行时间超过指定时间的查询语句。通过慢查询日志,可以查找出哪些查询语句的执行效率低,以便进行优化。

    通俗的说,MySQL 慢查询日志是排查问题的 SQL 语句,以及检查当前 MySQL 性能的一个重要功能。如果不是调优需要,一般不建议启动该参数,因为开启慢查询日志会或多或少带来一定的性能影响。

    默认情况下,慢查询日志功能是关闭的。可以通过以下命令查看是否开启慢查询日志功能。命令和执行过程如下:

    mysql> SHOW VARIABLES LIKE 'slow_query%';
    +---------------------+---------------------------------------------------------------------+
    | Variable_name       | Value                                                               |
    +---------------------+---------------------------------------------------------------------+
    | slow_query_log      | OFF                                                                 |
    | slow_query_log_file | C:ProgramDataMySQLMySQL Server 5.7DataLAPTOP-UHQ6V8KP-slow.log |
    +---------------------+---------------------------------------------------------------------+
    2 rows in set, 1 warning (0.02 sec)
    
    mysql> SHOW VARIABLES LIKE 'long_query_time';
    +-----------------+-----------+
    | Variable_name   | Value     |
    +-----------------+-----------+
    | long_query_time | 10.000000 |
    +-----------------+-----------+
    1 row in set, 1 warning (0.01 sec)

    参数说明如下:

    • slow_query_log:慢查询开启状态
    • slow_query_log_file:慢查询日志存放的位置(一般设置为 MySQL 的数据存放目录)
    • long_query_time:查询超过多少秒才记录

    启动和设置慢查询日志

    可以通过 log-slow-queries 选项开启慢查询日志。通过 long_query_time 选项来设置时间值,时间以秒为单位。如果查询时间超过了这个时间值,这个查询语句将被记录到慢查询日志。

    将 log_slow_queries 选项和 long_query_time 选项加入到配置文件的 [mysqld] 组中。格式如下:

    [mysqld]
    log-slow-queries=dirfilename
    long_query_time=n

    其中:

    • dir 参数指定慢查询日志的存储路径,如果不指定存储路径,慢查询日志将默认存储到 MySQL 数据库的数据文件夹下。
    • filename 参数指定日志的文件名,生成日志文件的完整名称为 filename-slow.log。 如果不指定文件名,默认文件名为 hostname-slow.log,hostname 是 MySQL 服务器的主机名。
    • “n”参数是设定的时间值,该值的单位是秒。如果不设置 long_query_time 选项,默认时间为 10 秒。

    还可以通过以下命令启动慢查询日志、设置指定时间:

    SET GLOBAL slow_query_log=ON/OFF;
    SET GLOBAL long_query_time=n;

    查看慢查询日志

    如果你想查看哪些查询语句的执行效率低,可以从慢查询日志中获得信息。和错误日志、查询日志一样,慢查询日志也是以文本文件的形式存储的,可以使用普通的文本文件查看工具来查看。

    例 1

    开启 MySQL 慢查询日志功能,并设置时间,命令和执行过程如下:

    mysql> SET GLOBAL slow_query_log=ON;
    Query OK, 0 rows affected (0.05 sec)
    
    mysql> SET GLOBAL long_query_time=0.001;
    Query OK, 0 rows affected (0.00 sec)

    由于需要演示这里我们将时间设置为了 0.001 秒,执行时间超过 0.001 秒的 SQL 语句将被记录到日志中。

    查询 tb_student 表中的数据,SQL 语句和执行过程如下:

    mysql> USE test;
    Database changed
    mysql> SELECT * FROM tb_student;
    +----+--------+
    | id | name   |
    +----+--------+
    |  1 | Java   |
    |  2 | MySQL  |
    |  3 | Python |
    +----+--------+
    3 rows in set (0.08 sec)

    相应的,慢查询日志的部分内容如下:

    # Time: 2020-06-01T01:59:18.368780Z
    # User@Host: root[root] @ localhost [::1]  Id:     3
    # Query_time: 0.006281  Lock_time: 0.000755 Rows_sent: 2  Rows_examined: 1034
    use test;
    SET timestamp=1590976758;
    SHOW VARIABLES LIKE 'slow_query%';

    删除慢查询日志

    慢查询日志的删除方法与通用日志的删除方法是一样的。可以使用 mysqladmin 命令来删除。也可以使用手工方式来删除。mysqladmin 命令的语法如下:

    mysqladmin -uroot -p flush-logs

    执行该命令后,命令行会提示输入密码。输入正确密码后,将执行删除操作。新的慢查询日志会直接覆盖旧的查询日志,不需要再手动删除。

    数据库管理员也可以手工删除慢查询日志,删除之后需要重新启动 MySQL 服务。

    注意:通用查询日志和慢查询日志都是使用这个命令,使用时一定要注意,一旦执行这个命令,通用查询日志和慢查询日志都只存在新的日志文件中。
    如果需要备份旧的慢查询日志文件,必须先将旧的日志改名,然后重启 MySQL 服务或执行 mysqladmin 命令。
  • 相关阅读:
    Prommetheus 插件监控 ES
    Linux LVM条带化
    MYSQL wait_timeout以及connect_timeout.这两个有什么区别
    alertmanager配置文件说明(转载)
    腾讯云MongoDB: skip查询内核优化(转载)
    MongoDB主从复制介绍和常见问题说明(转载)
    MongoDB 批量更新、批量新增、批量删除、批量替换 —— bulkWrite操作
    MongoDB Cluster 数据平衡优化
    MongoDB副本集提高读写速率
    Postgresql中时间戳与日期的相互转换(同样适用于GreenPlum)
  • 原文地址:https://www.cnblogs.com/cy0628/p/15027234.html
Copyright © 2020-2023  润新知