zoukankan      html  css  js  c++  java
  • MySQL Innodb引擎调优

    介绍:
      Innodb给MYSQL提供了具有提交,回滚和崩溃恢复能力的事务安全(ACID兼容)存储引擎。Innodb锁定在行级并且也在SELECT语句提供一个Oracle风格一致的非锁定读。这些特色增加了多用户部署和性能。没有在Innodb中扩大锁定的需要,因为在Innodb中行级锁定适合非常小的空间。Innodb也支持FOREIGN KEY强制。在SQL查询中,你可以自由地将Innodb类型的表与其它MYSQL的表的类型混合起来,甚至在同一个查询中也可以混合。
     Innodb 的创始人:Heikki Tuuri
     Heikki Tuuri在Innodb的Bug社区里也是很活跃的,如果遇到Bug也可以直接提到社区,得到作者的解答。

    为什么要学习Innodb的调优:
      目前来说:Innodb是为MYSQL处理巨大数据量时的最大性能设计。它的CPU效率可能是任何其它基于磁盘的关系数据库引擎所不能匹敌的。在数据量大的网站或是应用中Innodb是倍受青睐的。
      另一方面,在数据库的复制操作中Innodb也是能保证master和slave数据一致有一定的作用。

    参数调优内容:
      1. 内存利用方面
      2. 日值控制方面
      3. 文件IO分配,空间占用方面
      4. 其它相关参数

    1.内存利用方面:
    首先介绍一个Innodb最重要的参数:
    Innodb_buffer_pool_size
      这个参数和MyISAM的key_buffer_size有相似之处,但也是有差别的。这个参数主要缓存Innodb表的索引,数据,插入数据时的缓冲。为Innodb加速优化首要参数。
      该参数分配内存的原则:这个参数默认分配只有8M,可以说是非常小的一个值。如果是一个专用DB服务器,那么他可以占到内存的70%-80%。这个参数不能动态更改,所以分配需多考虑。分配过大,会使Swap占用过多,致使MYSQL的查询特慢。如果你的数据比较小,那么可分配是你的数据大小+10%左右做为这个参数的值。例如:数据大小为50M,那么给这个值分配Innodb_buffer_pool_size=64M
    设置方法:

    Innodb_buffer_pool_size=4G
    这个参数分配值的使用情况可以根据show Innodb statusG;中的
    ----------------------
    BUFFER POOL AND MEMORY
    ----------------------
    Total memory allocated 4668764894;

    去确认使用情况。


    第二个:
    Innodb_additional_mem_pool:
    作用:用来存放Innodb的内部目录
    这个值不用分配太大,系统可以自动调。不用设置太高。通常比较大数据设置16M够用了,如果表比较多,可以适当的增大。如果这个值自动增加,会在error log有中显示的。
    分配原则:
    show Innodb statusG;去查看运行中的DB是什么状态(参考BUFFER POOL AND MEMORY段中),然后可以调整到适当的值。
    ----------------------
    BUFFER POOL AND MEMORY
    ----------------------
    Total memory allocated 4668764894; in additional pool allocated 16777216
    参考:in additional pool allocated 16777216
    根据你的参数情况,可以适当的调整。
    设置方法:
    Innodb_additional_mem_pool=16M

    Innodb_additional_pool_size

    这个的效果不是很明显,至少是当操作系统能合理分配内存时。但你可能仍需要设成 20M 或更多一点以看 Innodb 会分配多少内存做其他用途。
     


    2.关于日值方面:
    Innodb_log_file_size
    作用:指定日值的大小
    分配原则:几个日值成员大小加起来差不多和你的Innodb_buffer_pool_size相等。上限为每个日值上限大小为4G.一般控制在几个LOG文件相加大小在2G以内为佳。具体情况还需要看你的事务大小,数据大小为依据。
    说明:这个值分配的大小和数据库的写入速度,事务大小,异常重启后的恢复有很大的关系。
    设置方法:
    Innodb_log_file_size=256M


    Innodb_log_files_in_group
    作用:指定你有几个日值组。
    分配原则: 一般我们可以用2-3个日值组。默认为两个。
    设置方法:
    Innodb_log_files_in_group=3


    Innodb_log_buffer_size:
    作用:事务在内存中的缓冲。
    分配原则:控制在2-8M.这个值不用太多的。他里面的内存一般一秒钟写到磁盘一次。具体写入方式和你的事务提交方式有关。在Oracle等数据库了解这个,一般最大指定为3M比较合适。
    参考:Innodb_os_log_written(show global status 可以拿到)
    如果这个值增长过快,可以适当的增加Innodb_log_buffer_size
    另外如果你需要处理大理的TEXT,或是BLOB字段,可以考虑增加这个参数的值。
    设置方法:
    Innodb_log_buffer_size=3M

    Innodb_flush_logs_at_trx_commit
    作用:控制事务的提交方式
    分配原则:这个参数只有3个值,0,1,2请确认一下自已能接受的级别。默认为1,主库请不要更改了。
    性能更高的可以设置为0或是2,但会丢失一秒钟的事务。
    说明:
    这个参数的设置对Innodb的性能有很大的影响,所以在这里给多说明一下。
    当这个值为1时:Innodb 的事务LOG在每次提交后写入日值文件,并对日值做刷新到磁盘。这个可以做到不丢任何一个事务。
    当这个值为2时:在每个提交,日志缓冲被写到文件,但不对日志文件做到磁盘操作的刷新,在对日志文件的刷新在值为2的情况也每秒发生一次。但需要注意的是,由于进程调用方面的问题,并不能保证每秒100%的发生。从而在性能上是最快的。但操作系统崩溃或掉电才会删除最后一秒的事务。
    当这个值为0时:日志缓冲每秒一次地被写到日志文件,并且对日志文件做到磁盘操作的刷新,但是在一个事务提交不做任何操作。MYSQLd进程的崩溃会删除崩溃前最后一秒的事务。

    从以上分析,当这个值不为1时,可以取得较好的性能,但遇到异常会有损失,所以需要根据自已的情况去衡量。


    设置方法:
    Innodb_flush_logs_at_trx_commit=1

    补充:

    抱怨 Innodb 比 MyISAM 慢 100 倍?那么你大概是忘了调整这个值。默认值 1 的意思是每一次事务提交或事务外的指令都需要把日志写入(flush)硬盘,这是很费时的。特别是使用电池供电缓存(Battery backed up Cache)
    时。设成 2 对于很多运用,特别是从MyISAM 表转过来的是可以的,它的意思是不写入硬盘而是写入系统缓存。日志仍然会每秒 flush 到硬盘,所以你一般不会丢失超过 1-2 秒的更新。设成 0 会更快一点,但安全方面比较差,即使 MYSQL 挂了也可能会丢失事务的数据。而值 2 只会在整个操作系统挂了时才可能丢数据。
    vim /etc/my.cnf
    Innodb_flush_log_at_trx_commit=2
    也可以在 MYSQLd 运行时执行 :
    set GLOBAL Innodb_flush_log_at_trx_commit = 2

    3. 文件IO分配,空间占用方面
    Innodb_file_per_table
    作用:使每个Innodb的表,有自已独立的表空间。如删除文件后可以回收那部分空间。
    分配原则:只有使用不使用。但DB还需要有一个公共的表空间。
    设置方法:
    Innodb_file_per_table=1

    Innodb_file_io_threads
    作用:文件读写IO数,这个参数只在Windows上起作用。在Linux上只会等于4
    设置方法:
    Innodb_file_io_threads=4

    Innodb_open_files
    作用:限制Innodb能打开的表的数据。
    分配原则:如果库里的表特别多的情况,请增加这个。这个值默认是300。
    设置方法:
    Innodb_open_files=800
    请适当的增加table_Cache


    4. 其它相关参数
    这里说明一个比较重要的参数:
    Innodb_flush_method
    作用:Innodb和系统打交道的一个IO模型
    分配原则:Windows不用设置。
    Unix可以设置:fsync() or O_SYNC/O_DSYNC
    如果系统可以禁止系统的Cache那就把他禁了。
    Linux可以选择:O_DIRECT
    直接写入磁盘,禁止系统Cache了

    补充:

    设置 InnoDB 同步 IO 的方式 :
    1) Default ? 使用 fsync()。
    2) O_SYNC 以 sync 模式打开文件,通常比较慢。
    3) O_DIRECT,在 Linux 上使用 Direct IO。可以显著提高速度,特别是
    在 RAID 系统上。避免额外的数据复制和 double buffering(mysql buffering
    和 OS buffering)


    设置方法:
    Innodb_flush_method=O_DIRECT

    Innodb_max_dirty_pages_pct
    作用:控制Innodb的脏页在缓冲中在那个百分比之下,值在范围1-100,默认为90.
    这个参数的另一个用处:当Innodb的内存分配过大,致使Swap占用严重时,可以适当的减小调整这个值,使达到Swap空间释放出来。建义:这个值最大在90%,最小在15%。太大,缓存中每次更新需要致换数据页太多,太小,放的数据页太小,更新操作太慢。
    设置方法:
    Innodb_max_dirty_pages_pct=90
    动态更改需要有Super权限:
    set global Innodb_max_dirty_pages_pct=50;

    参考:https://imysql.com/node/609

            https://www.cnblogs.com/steven9898/p/11340764.html

        

  • 相关阅读:
    Python笔记_第一篇_面向过程_第一部分_5.Python数据类型之字符串类型(string)
    每天一杯C_Visual Studio各个版本的区别和总结
    Python笔记_第一篇_面向过程_第一部分_5.Python数据类型之数字类型(number)
    Python笔记_第一篇_面向过程_第一部分_3.进制、位运算、编码
    Valid Number @python
    正式进驻博客园
    LCT总结
    LCT总结
    bzoj3229 [Sdoi2008]石子合并(非dp的GarsiaWachs算法)
    bzoj3229 [Sdoi2008]石子合并(非dp的GarsiaWachs算法)
  • 原文地址:https://www.cnblogs.com/VicLiu/p/11810125.html
Copyright © 2011-2022 走看看