2019-08-14第十二讲:Mysql会抖一下[mysql实战45讲]

一. 你的SQL语句为什么变慢了

1.回顾: 

    掌柜的记忆==> 内存

    粉板==> redo log

    账本==> binlog

    掌柜总要把记住的东西写下来 ==> 内存总要写盘  ==> flush

2.名词

    脏页: 内存数据页跟磁盘数据页内容不一致, 我们称内存页为: 脏页

    干净页: 内存数据写入磁盘后 , 内存和磁盘上的数据内容一致后 , 称为: 干净页


3.孔乙己赊账例子: 

    原来已欠10文 , 又要赊 9 文


1.孔乙己赊账更新 和 flush 过程

4. 疑问: 什么时候会刷脏页 ? ==> 粉板写到账本

    场景1.粉板满了 .    ==   redo log 写满了 

            ==> 停止所有更新

            ==> checkpoint 推进 ,从 cp 到 cp'   == 把绿色部分的脏页flush到磁盘

            ==> write pos 到cp' 之间的空间, 可以继续写入redo log .

2. redo log 状态图

场景2: 掌柜记不住了 == 内存满了. 

==> 需要淘汰页 

==> 如果是脏页, 就要先flush到磁盘. 

引申1 :     为什么不清内存, 直接读盘?  (我觉得清内存很傻,因为弄复杂了)

答: 1.从性能考虑, 如果内存存在, 内存肯定正确. 

      2.如果内存没有, 磁盘肯定正确. 

场景3: 生意不忙, 或者打烊后 == mysql认为系统空闲的时候

    见缝插针, 一有机会就刷部分脏页.

场景4: 年底清算 == mysql正常关闭 

5. 四种场景对性能的影响: 

    场景1: redo log 写满 ==> 要避免, 因为所有更新都会被堵住. 

    场景2: 内存满了 ==> 是常态

        知识点1: innodb 使用缓冲池管理内存, 缓冲池中内存页有三种状态: 

            1.未使用

            2.干净页

            3.脏页

        知识点2: 当要读入的数据不在内存中, 就必须向缓冲池申请一个数据页. 

                    ==> 只能把最久不使用的数据页淘汰. 

                    ==> 如果是脏页, 要先写盘.

                    ==> 一个查询要淘汰的脏页太多,会导致响应时间变长

    总结:  要有脏页比例控制机制.

6.innodb 刷脏页的控制策略. 

1.要告诉innodb 宿主机的IO能力. 

       ==> innodb_io_capacity 参数

       ==> 建议设置成磁盘的IOPS 


疑问1 : 什么是IOPS ? 

IOPS(Input/Output Operations Per Second)是一个用于计算机存储设备(如硬盘(HDD)、固态硬盘(SSD)或存储区域网络(SAN))性能测试的量测方式, 可以视为是每秒的读写次数


        ==> 可以通过fio工具测试 , 命令如下

        ==> 设置错误的现象:  mysql写入很慢, tps很低, IO压力不大. 


2.确定全力刷脏页后, 要指定策略, 不能一直全力刷脏页: 

    1.影响因素:  脏页比例,  redolog 写盘速度

    2. innodb_max_dirty_pages_pct 脏页比例上限  默认75%

    3.F1 和 F2 如下图: 


3. innodb 刷脏页速度策略

    总结: 总之和脏页比例 , redo log 写盘速度有关. 

    原则1: 不要让脏页比例经常接近75% 

    ==> innodb_buffer_pool_pages_dirty 

    ==> innodb_buffer_pool_pages_total  脏页比例是通过这两个参数得到的. 

3.有趣的刷脏页策略: 

   1.策略1 :  innodb_flush_neighbors

        what : flush时, 如果目标脏页附近也是脏页, 会一起刷.  该机制会蔓延.

        why: 机械硬盘时代 减少很多随机IO

      but: SSD 时代,  IOPS已经不是瓶颈, innodb_flush_neighbors应该设置成0 , 只刷自己,可以减少SQL语句的响应时间. 


        

你可能感兴趣的:(2019-08-14第十二讲:Mysql会抖一下[mysql实战45讲])