zoukankan      html  css  js  c++  java
  • (6)MySQL进阶篇SQL优化(MyISAM锁)

    1.MySQL锁概述

    锁是计算机协调多个进程或线程并发访问某一资源的机制。在数据库中,除传统的计算资源 (如 CPU、RAM、I/O 等)的抢占以外,数据也是一种供许多用户共享的资源。如何保证数 据并发访问的一致性、有效性是所有数据库必须解决的一个问题,锁冲突也是影响数据库并发访问性能的一个重要因素。

    2.MySQL锁特性

    相对其他数据库而言,MySQL的锁机制比较简单,其最显著的特点是不同的存储引擎支持不同的锁机制,归纳表格如下:

           存储引擎          锁类型

    MyISAM

    MEMORY

    InnoDB

    BDB

    表级锁(table-level locking

    页面锁(page-level locking

     

     

     

    行级锁(row-level locking

     

     

     

    注:InnoDB存储引擎但默认情况下是采用行级锁。
    MySQL这3种锁的特性可大致归纳如下:
    ●表级锁:开销小,加锁快;不会出现死锁;锁定粒度大,发生锁冲突的概率最高,并发度最低。
    ●行级锁:开销大,加锁慢;会出现死锁;锁定粒度最小,发生锁冲突的概率最低,并发度最高。
    ●页面锁:开销和加锁时间界于表锁和行锁之间;会出现死锁;锁定粒度界于表锁和行锁之间,并发度一般。
    从上述特点可见,很难笼统地说哪种锁更好,只能就具体应用程序的特点来说哪种锁更合适!仅从锁的角度来说:表级锁更适合于以查询为主,只有少量按索引条件更新数据的应用程序,如Web应用程序;而行级锁则更适合于有大量按索引条件并发更新少量不同数据,同时又有并发查询的应用程序,如一些在线事务处理(OLTP)系统。接下来锁内容将重点介绍MySQL表锁和InnoDB行锁的问题,由于BDB已经被InnoDB取代,已经成为历史,在此就不做进一步的讨论了。

    3.MyISAM表锁

    MyISAM存储引擎只支持表锁,这也是MySQL开始几个版本中唯一支持的锁类型。随着应用程序对事务完整性和并发性要求的不断提高,MySQL才开始开发基于事务的存储引擎,后来慢慢出现了支持页锁的BDB存储引擎和支持行锁的InnoDB存储引擎(InnoDB实际是单独的一个公司,后面被Oracle公司收购了)。但是MyISAM的表锁依然是使用最为广泛的锁类型。

    3.1查询表级锁争用情况

    可以通过检查table_locks_waited和table_locks_immediate状态变量来分析系统上的表锁定争夺:

    SHOW STATUS LIKE '%Table_locks%';


    ●Table_locks_immediate:表示立即释放表锁数。
    ●Table_locks_waited:表示需要等待的表锁数。
    如果Table_locks_waited的值比较高,则说明存在着较严重的表级锁争用情况。如果Table_locks_immediate / Table_locks_waited > 5000,最好采用InnoDB引擎,因为InnoDB是行锁而MyISAM是表锁,对于高并发写入的应用程序InnoDB效果会好些。

    3.2MySQL表级锁的锁模式

    MySQL的表级锁有两种模式:表共享读锁(Table Read Lock)和表独占写锁(Table Write Lock)。
    因为8.0版本以上MySQL创建表类型(储存引擎)默认是InnoDB类型(通过以下命令可以看到):

    SHOW ENGINES;


    所以下面例子中我们需要把创建的表类型转换为MyISAM类型方便测试,首先创建两个结构一样的goods_test、goods_test_tmp测试表,方便测试:

    CREATE TABLE `goods_test`  (
      `ID` int NOT NULL AUTO_INCREMENT COMMENT '自增ID',
      `Name` varchar(100) CHARACTER SET utf8mb4 COLLATE utf8mb4_0900_ai_ci NOT NULL COMMENT '名称',
      PRIMARY KEY (`ID`) USING BTREE
    ) ENGINE = InnoDB CHARACTER SET = utf8mb4 COLLATE = utf8mb4_0900_ai_ci ROW_FORMAT = Dynamic;
    ..............

    然后把goods_test、goods_test_tmp表从InnoDB转换为MyISAM表类型:

    ALTER TABLE goods_test ENGINE=MyISAM;
    ALTER TABLE goods_test_tmp ENGINE=MyISAM;

    再查看下goods_test、goods_test_tmp表类型:

    SHOW TABLE STATUS LIKE 'goods_test';

    SHOW TABLE STATUS LIKE 'goods_test_tmp';


    MyISAM在执行查询语句(SELECT)前,会自动给涉及的所有表加读锁,在执行更新操作(UPDATE、DELETE、INSERT等)前,会自动给涉及的表加写锁,这个过程并不需要用户干预,因此,用户一般不需要直接用LOCK TABLE命令给MyISAM表显式加锁。在以下的示例中,显式加锁基本上都是为了方便演示而已,并非必须如此的。

    3.2.1MyISAM存储引擎的写阻塞读例子

    session_1

    session_2

    LOCK TABLE goods_test WRITE
    
    > OK
    
    > 时间: 0.006s
    
    获取表goods_test的WRITE锁定
    SELECT * FROM goods_test WHERE ID=1
    
    等待(阻塞)...
    SELECT * FROM goods_test WHERE ID=1
    
    等待(阻塞)...
    SELECT * FROM goods_test_tmp WHERE ID=1
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.004s
    SELECT * FROM goods_test_tmp WHERE ID=1
    
    > OK
    
    > 时间: 0.003s
    INSERT INTO goods_test (`Name`) VALUES ('小米')
    
    > Affected rows: 1
    
    > 时间: 0.005s
    INSERT INTO goods_test (`Name`) VALUES ('苹果')
    
    等待(阻塞)...
    INSERT INTO goods_test_tmp (`Name`) VALUES ('华为')
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.005s
    INSERT INTO goods_test_tmp (`Name`) VALUES ('华为')
    
    > Affected rows: 1
    
    > 时间: 0.005s
    UPDATE goods_test SET `Name`='华为' WHERE ID=1
    
    > Affected rows: 1
    
    > 时间: 0.006s
    UPDATE goods_test SET `Name`='小米' WHERE ID=1
    
    等待(阻塞)...
    UPDATE goods_test_tmp SET `Name`='小米' WHERE ID=1
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.015s
    UPDATE goods_test_tmp SET `Name`='华为' WHERE ID=1
    
    > Affected rows: 1
    
    > 时间: 0.003s
    UNLOCK TABLES
    
    > OK
    
    > 时间: 0.003s
    
    释放锁
    SQL全部执行成功

     

    从上述例子可见,对MyISAM表的写操作,则会阻塞其他用户对同一表的读和写操作;MyISAM表的读操作与写操作之间,以及写操作之间是串行的!当一个线程获得对一个表的写锁后,只有持有锁的线程可以对表进行更新操作。其他线程的读、写操作都会等待,直到锁被释放为止,再来看看以下语句:

    LOCK TABLE goods_stock READ LOCAL, goods_stock_price READ LOCAL; 

    注:LOCK TABLES语句后面加了“LOCAL”选项,其作用就是在满足MyISAM表并发插入条件的情况下,允许其他用户在表尾并发插入记录。

    3.2.2MyISAM存储引擎的读阻塞写例子

    session_1

    session_2

    LOCK TABLE goods_test READ
    
    > OK
    
    > 时间: 0.007s
    
    获得表goods_test的READ锁定
    SELECT * FROM goods_test WHERE ID=1
    
    > OK
    
    > 时间: 0.005s
    SELECT * FROM goods_test WHERE ID=1
    
    > OK
    
    > 时间: 0.003s
    SELECT * FROM goods_test_tmp WHERE ID=1
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.003s
    SELECT * FROM goods_test_tmp WHERE ID=1
    
    > OK
    
    > 时间: 0.062s
    INSERT INTO goods_test (`Name`) VALUES ('小米')
    
    > 1099 - Table 'goods_test' was locked with a READ lock and can't be updated
    
    > 时间: 0.005s
    INSERT INTO goods_test (`Name`) VALUES ('苹果')
    
    等待(阻塞)...
    INSERT INTO goods_test_tmp (`Name`) VALUES ('华为')
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.003s
    INSERT INTO goods_test_tmp (`Name`) VALUES ('华为')
    
    > Affected rows: 1
    
    > 时间: 0.007s
    UPDATE goods_test SET `Name`='华为' WHERE ID=1
    
    > 1099 - Table 'goods_test' was locked with a READ lock and can't be updated
    
    > 时间: 0.003s
    UPDATE goods_test SET `Name`='小米' WHERE ID=1;
    
    等待(阻塞)...
    UPDATE goods_test_tmp SET `Name`='小米' WHERE ID=1
    
    > 1100 - Table 'goods_test_tmp' was not locked with LOCK TABLES
    
    > 时间: 0.003s
    UPDATE goods_test_tmp SET `Name`='华为' WHERE ID=1
    
    > Affected rows: 1
    
    > 时间: 0.003s
    UNLOCK TABLES
    
    > OK
    
    > 时间: 0.004s
    
    释放锁
    SQL全部执行成功

     

    从上述例子可见,对MyISAM表的读操作,不会阻塞其他用户对同一表的读请求,但会阻塞对同一表的写请求。其实,在自动加锁的情况下也基本如此,MyISAM总是一次获得SQL语句所需要的全部锁。这也正是MyISAM表不会出现死锁(Deadlock Free)的原因。
    注:还有一点,当使用LOCK TABLES时,不仅需要一次锁定用到的所有表,而且,同一个表在SQL语句中出现多少次,就要通过与SQL语句中相同的别名锁定多少次,否则也会出错!举例如下:
    ●对goods_test表获得读锁:

    LOCK TABLE goods_test READ;

    ●但是通过别名(AS [tableName])访问会提示错误:

    SELECT a.ID,a.`Name` FROM goods_test AS a JOIN goods_test AS b ON a.ID=b.ID
    > 1100 - Table 'a' was not locked with LOCK TABLES
    > 时间: 0.017s

    ●需要对别名分别锁定:

    LOCK TABLE goods_test AS a READ,goods_test AS b READ
    > OK
    > 时间: 0.006s

    ●按照别名的查询可以正确执行:

    SELECT a.ID,a.`Name` FROM goods_test AS a JOIN goods_test AS b ON a.ID=b.ID
    > OK
    > 时间: 0.004s
    3.2.3 MyISAM存储引擎的读写(并发插入(Concurrent Inserts))并发例子

    上小节提到过MyISAM表的读和写是串行的,但这是就总体而言的。在一定条件下,MyISAM表也支持查询和插入操作的并发进行。 MyISAM存储引擎有一个系统变量concurrent_insert,专门用以控制其并发插入的行为,其值分别可以为0、1或2。
    ●当concurrent_insert设置为0时,不允许并发插入。
    ●当concurrent_insert设置为1时,如果MyISAM表中没有空洞(即表的中间没有被删除的行),MyISAM允许在一个进程读表的同时,另一个进程从表尾插入记录。这也是MySQL的默认设置。
    ●当concurrent_insert设置为2时,无论MyISAM表中有没有空洞,都允许在表尾并发插入记录。
    请看以下例子:

    session_1

    session_2

    LOCK TABLE goods_test READ LOCAL
    
    > OK
    
    > 时间: 0.008s
    
    获得表goods_test的READ LOCAL锁定
    INSERT INTO goods_test (`Name`) VALUES ('小米')
    
    > 1099 - Table 'goods_test' was locked with a READ lock and can't be updated
    
    > 时间: 0.009s
    INSERT INTO goods_test (`Name`) VALUES ('苹果')
    
    > Affected rows: 1
    
    > 时间: 0.006s
    UPDATE goods_test SET `Name`='华为' WHERE ID=1
    
    > 1099 - Table 'goods_test' was locked with a READ lock and can't be updated
    
    > 时间: 0.104s
    UPDATE goods_test SET `Name`='小米' WHERE ID=1
    
    等待(阻塞)...
    当前session不能访问其他session插入的记录:
    
    SELECT * FROM goods_test
    
    >
    SELECT * FROM goods_test
    
    >苹果
    UNLOCK TABLES
    
    > OK
    
    > 时间: 0.05s
    
    释放锁
    UPDATE goods_test SET `Name`='小米' WHERE ID=1
    
    > Affected rows: 1
    
    > 时间: 0.071s
    当前session解锁后可以获得其他session插入的记录:
    
    SELECT * FROM goods_test
    
    >苹果
     

    可以利用MyISAM存储引擎的并发插入特性,来解决应用程序中对同一表查询和插入的锁争用。例如,将concurrent_insert系统变量设为2,总是允许并发插入;同时,通过定期在系统空闲时段执行OPTIMIZE TABLE语句来整理空间碎片,收回因删除记录而产生的中间空洞。有关OPTIMIZE TABLE语句的详细介绍,可以参见第三章“MySQL进阶篇SQL优化(索引)”里面“定期优化表”5.2小节的内容。

    3.3 MyISAM的锁调度

    前面讲过,MyISAM存储引擎的读锁和写锁是互斥的,读写操作是串行的。那么,一个进程请求某个MyISAM表的读锁,同时另一个进程也请求同一表的写锁,MySQL如何处理呢?
    答案是写进程先获得锁。不仅如此,即使读请求先到锁等待队列,写请求后到,写锁也会插到读锁请求之前!这是因为MySQL认为写请求一般比读请求要重要。这也正是MyISAM表不太适合于有大量更新操作和查询操作应用的原因,因为,大量的更新操作会造成查询操作很难获得读锁,从而可能永远阻塞。这种情况有时可能会变得非常糟糕!幸好我们可以通过一些设置来调节MyISAM的调度行为:
    通过指定启动参数low-priority-updates,使MyISAM引擎默认给予读请求以优先的权利。
    通过执行命令SET LOW_PRIORITY_UPDATES=1,使该连接发出的更新请求优先级降低。
    通过指定INSERT、UPDATE、DELETE语句的LOW_PRIORITY属性,降低该语句的优先级。
    虽然上面三种方法都是要么更新优先,要么查询优先的方法,但还是可以用其来解决查询相对重要的应用程序(如用户登录系统)中读锁等待严重的问题。
    另外,MySQL也提供了一种折中的办法来调节读写冲突,即给系统参数max_write_lock_count设置一个合适的值,当一个表的读锁达到这个值后,MySQL就暂时将写请求的优先级降低,给读进程一定获得锁的机会。
    上面已经讨论了写优先调度机制带来的问题和解决办法。这里还要强调一点:一些需要长时间运行的查询操作,也会使写进程“饿死”!因此,应用程序中应尽量避免出现长时间运行的查询操作,不要总想用一条SELECT语句来解决问题,因为这种看似巧妙的SQL语句,往往比较复杂,执行时间较长,在可能的情况下可以通过使用中间表等措施对SQL语句做一定的“分解”,使每一步查询都能在较短时间完成,从而减少锁冲突。如果复杂查询不可避免,应尽量安排在数据库空闲时段执行,比如一些定期统计可以安排在夜间执行。

    参考文献:
    深入浅出MySQL大全

  • 相关阅读:
    springmvc入门详解
    getClass 与getSimpleName
    mybati的存储过程
    mybatis与spring的整合
    mybatis分页插件以及懒加载
    mybatis知识总结
    【Java面试题】30 子线程循环10次,接着主线程循环100,接着又回到子线程循环10次,接着再回到主线程又循环100,如此循环50次,请写出程序。
    【Java面试题】29 设计4个线程,其中两个线程每次对j增加1,另外两个线程对j每次减少1。写出程序。
    【Java面试题】28 简述synchronized和java.util.concurrent.locks.Lock的异同 ?
    【Java面试题】27 多线程笔试面试概念问答
  • 原文地址:https://www.cnblogs.com/wzk153/p/14653903.html
Copyright © 2011-2022 走看看