一: 抖一下?
- 平时的工作中,不知道有没有遇到过这样的场景。
- 一条 SQL 语句,正常执行的时候特别快,但是有时也不知道怎么回事,它就会变得特别慢。
- 并且这样的场景很难复现,它不只随机,而且持续时间还很短。
- 看上去,这就像是数据库“抖”了一下。
二:为什么会 ”抖一下“ 呢?
- 上面一章 《Mysql 一条 SQL 更新语句是如何执行的?(Redo log)》 讲述了,Mysql 在更新操作时候 的 WAL 机制
- WAL 机制
- InnoDB 在处理更新语句的时候,只做了写日志这一个磁盘操作。
- 这个日志叫作 redo log(重做日志),在更新内存写完 redo log 后,就返回给客户端,本次更新成功。
- Redo log 总要找时间,将日志信息刷入磁盘,术语为 flush.
- 在 flash 执行之前,其实,内存中的数据和磁盘中的数据是不同的。
- 当内存数据页跟磁盘数据页内容不一致的时候,我们称这个内存页为“脏页”。
- 内存数据写入到磁盘后,内存和磁盘上的数据页的内容就一致了,称为“干净页”
- 回到开头的问题,不难想象。
- 平时执行很快的更新操作,其实就是在写内存和日志,而 MySQL 偶尔“抖”一下的那个瞬间,可能就是在刷脏页(flush)。
三: 什么情况下会触发 flash 操作呢?
- Redo log 被打满
- 必须进行 flush 操作
- 系统内存不足
- 当需要新的内存页,而内存不够用的时候,就要淘汰一些数据页,空出内存给别的数据页使用。
- 如果淘汰的是“脏页”,就要先将脏页写到磁盘。
- MySQL 认为系统“空闲”的时候。
- 只要有机会就刷一点“脏页”。
- MySQL 正常关闭的情况。
- 这时候,MySQL 会把内存的脏页都 flush 到磁盘上,这样下次 MySQL 启动的时候,就可以直接从磁盘上读数据,启动速度会很快。
四:不同情况下刷新 “脏页” 对性能的影响?
- 第一种是“redo log 写满了,要 flush 脏页”,这种情况是 InnoDB 要尽量避免的。
- 因为出现这种情况的时候,整个系统就不能再接受更新了,所有的更新都必须堵住。如果你从监控上看,这时候更新数会跌为 0。
- 第二种是“内存不够用了,要先将脏页写到磁盘”,这种情况其实是常态。
- InnoDB 用缓冲池(buffer pool)管理内存,缓冲池中的内存页有三种状态:
- 第一种是,还没有使用的。
- 第二种是,使用了并且是干净页。
- 第三种是,使用了并且是脏页。
- 而当要读入的数据页没有在内存的时候,就必须到缓冲池中申请一个数据页。
- 这时候只能把最久不使用的数据页从内存中淘汰掉
- 如果要淘汰的是一个干净页,就直接释放出来复用;
- 但如果是脏页呢,就必须将脏页先刷到磁盘,变成干净页后才能复用。
- InnoDB 的策略是尽量使用内存,因此对于一个长时间运行的库来说,未被使用的页面很少。
- 所以,刷脏页虽然是常态,但是出现以下这两种情况,都是会明显影响性能的:
- 一个查询要淘汰的脏页个数太多,会导致查询的响应时间明显变长;
- 日志写满,更新全部堵住,写性能跌为 0,这种情况对敏感业务来说,是不能接受的。
- 所以,InnoDB 会有一套自己控制脏页比例的机制,来尽量避免上面的这两种情况。
- innoDB 会控制脏页的比例,和整体 Flush 的写入速度。