zoukankan      html  css  js  c++  java
  • MySQL自增列锁模式 innodb_autoinc_lock_mode不同参数下性能测试

    20190701:感谢@接天居士的提示,在多核心CPU的配置环境下测试,确实是有差异的,感谢纠错,本来想删除这篇文章的,留着当错教训吧,测试环境差异造成的错误教训

     

    对于innodb_autoinc_lock_mode 各种参数的值的含义,网上也有各种详解,看完觉得意犹未尽,这里不做阐述,只动手测试,看看性能上,到底有没有理论上所说的差别。
    对于自增列的锁定,据说是innodb_autoinc_lock_mode = 2模式下有较高的性能,MySQL 8.0下innodb_autoinc_lock_mode 默认值为2。
    于是通过修改改参数,测试不同参数下的一些性能表现,其结果还是比较出乎意料的……

    测试环境:
    MySQL 8.0.12 ON CentOS 7,1核1G内存
    虽然环境资源配置有限,这里目的不是做性能测试,主要是对比在innodb_autoinc_lock_mode = 0和 2模式下的性能对比(没有做参数为1的情况)

    测试方法:
    本地Python开启多个线程,每个线程循环一定的数量,向某一个表中插入数据,看最终的时间表现情况
    测试代码如下,开启20个线程,每个线程循环插入10000条数据,同时将当前线程Id写入当前数据行中(用来多个线程的执行是否是均匀或者说是交替的),看最终的时间。

    #coding=utf-8
    import threading
    import pymysql
    from time import ctime,sleep
    
    connstr_tencent = {'host': '***.***.***.***', 'port': 3306, 'user': 'root', 'password': 'root', 'db': 'db01', 'charset': 'utf8mb4'}
    def access_mysql(para):
        conn = pymysql.connect(host=connstr_tencent['host'],
                               port=connstr_tencent['port'],
                               user=connstr_tencent['user'],
                               password=connstr_tencent['password'],
                               db=connstr_tencent['db'],
                               charset=connstr_tencent['charset'],
                               connect_timeout = 100000 )
        cursor = conn.cursor()
        for i in range(10000):
            cursor.execute(" insert into test_autoicrement(col2,col3,col4) values ('thread:{0}','thread:{0}','thread:{0}'); ".format(str(para)))
        cursor.close()
        conn.commit()
        conn.close()
    
    def main():
        # 生成线程
        threads = []
        for i in range(20):
            t = threading.Thread(target=access_mysql, args=(i,))
            threads.append(t)
    for t in threads: t.setDaemon(True) t.start() for t in threads: t.join() if __name__ == '__main__': print("begin at {0}".format(ctime())) main() print("finsh at {0}".format(ctime()))

    测试结果1,未开启binlog的情况

    测试结果2,开启binlog的情况

    测试结果仅仅是本地软硬件环境下表出现来的结果,主要目的是不同参数的性能对比

    测试说明:
    1,每次修改innodb_autoinc_lock_mode 之后,truncate测试表,并重启MySQL服务。
    2,innodb_autoinc_lock_mode =0或者2做交叉测试,
       也即测试一次innodb_autoinc_lock_mode =0的,truncate 测试表,重启MySQL服务,然后再测试innodb_autoinc_lock_mode =2的情况。
    3,不管是innodb_autoinc_lock_mode 为0或者2,(当前测试条件下)均未发现跳号的情况。
    4,多线程测试下,记录都记录是当前线程的id,每次检验最终测试数据的分布情况,基本上都是每个线程均匀交替执行插入的,参考下图。

    结论:
    1,至少在MySQL 8.0下,innodb_autoinc_lock_mode 的值设置为0或者2的情况下,在性能上,没有发现明显的差异。
    2,开启binlog的情况下,可能是测试数据量或者并发量不够,未发现比没有开启binlog有明显的性能下降。

    另外:
    一开始本地的Python连接5.7是没有问题的,连接MySQL8.0是直接报错,然后升级pymysql即可,
    pymysql的版本笔者直接从0.7升级到0.9,不知道0.8版本的是否可以连接MySQL 8.0。

    20190701:感谢@接天居士的提示,在多核心CPU的配置环境下测试,确实是有差异的,感谢纠错,本来想删除这篇文章的,留着当错教训吧,测试环境差异造成的错误教训

     

    关于innodb_autoinc_lock_mode参数,参考:
    http://seanlook.com/2017/02/16/mysql-autoincrement/
    https://www.cnblogs.com/JiangLe/p/6362770.html

  • 相关阅读:
    vim使用技巧
    排序
    2020-3-27 学习面向对象的笔记
    小圆圈第三章答案
    内置函数部分用法
    Pycharm快捷键
    小猿圈第二章答案
    Typora学习笔记
    AI的真实感
    Unity 横版2D移动跳跃问题——关于一段跳与二段跳
  • 原文地址:https://www.cnblogs.com/wy123/p/9636018.html
Copyright © 2011-2022 走看看