• MySQL存储写入性能严重抖动分析


    案例描述:

      通过iostat发现存储的写性能长期维持在10MB左右,而且因为写性能差已经导致数据库性能变差;

      两个小时以后,iostat发现系统的写性能已经能够到100MB以上,数据库性能也恢复正常。

    也就是说,在对系统、数据库监控中,出现了性能波谷,存储写入性能严重抖动,为什么?

    一、原理过程

    由上原理图,进行过程解析:

      1、事务提交,修改buffer_pool中的数据形成脏页,并且同时生成redo日志,将日志写入磁盘redo log中;

      2、事务提交成功;

    假设,有三组redo log文件

      3、继续事务提交,修改数据,写redo log,如果innodb_log_file_size的数值很小,但是产生的redo日志信息很大,这样第一组redo日志很快就会被写满,就要进行日志文件切换;

      4、如果三组redo log文件都被写满了,就需要进行日志覆盖;

      5、如果需要覆盖的redo log日志文件记录的脏页信息还没有写入到磁盘中,数据库就会主动加大写的力度将脏页信息刷到磁盘里

      6、在将redo日志文件对应的脏页刷入磁盘的过程中,事务没有办法提交,影响业务。

     

    二、原理分析

    1、通过对redo log的修改时间查看日志文件切换时间

      通过shell> ls -l /mydata/ib_logfile*,查看开始修改的时间和最后修改的时间,计算logfile切换时间。

    2、如果redo日志文件切换时间过短,也就是切换频繁,就很容易导致写抖动

      1、正常业务繁忙的会是10-20分钟;

      2、如果是比一般的时间短,说明文件小,切换频繁。

     

    三、解决写抖动问题

    1、增加redo日志文件数量

    mysql> show global variables like 'innodb_log_files_in_group';
    +---------------------------+-------+
    | Variable_name             | Value |
    +---------------------------+-------+
    | innodb_log_files_in_group | 2     |
    +---------------------------+-------+
    1 row in set (0.01 sec)

    2、扩大日志文件容量

    mysql> show global variables like 'innodb_log_file_size';
    +----------------------+----------+
    | Variable_name        | Value    |
    +----------------------+----------+
    | innodb_log_file_size | 50331648 |
    +----------------------+----------+
    1 row in set (0.01 sec)

    3、提高log file的写性能:将日志文件放到写性能优质的磁盘上

    mysql> show global variables like 'innodb_log_group_home_dir';
    +---------------------------+-------+
    | Variable_name             | Value |
    +---------------------------+-------+
    | innodb_log_group_home_dir | ./    |
    +---------------------------+-------+
    1 row in set (0.01 sec)

     注意:

      上面的这三个参数都非动态参数,需要在配置文件/etc/my.cnf中进行修改保存,再重新启动数据库实例才能生效。

  • 相关阅读:
    A magic method allowing a third variable used in comparison function of std::sort
    Create a wireframe box in rviz but not using any other extra tools (unfinished)
    Three methods to iterate every point in pointcloud of PCL(三种遍历点云的方式)
    Environment Perception: 3D Truss Environment Mapping and Parametric Expression Extraction
    shell脚本练习02--求字符串的长度
    shell脚本练习01
    shell脚本,循环的记录
    linux 备份最近一天的文件
    mybatis和java一些知识记录
    第8章
  • 原文地址:https://www.cnblogs.com/geaozhang/p/7184712.html
Copyright © 2020-2023  润新知