MySQL锁之深入死锁分析

大家好，欢迎来到IT知识分享网。

1 死锁产生原因分析

点击此处了解MySQL各种锁分析

1.1 产生原因

所谓死锁DeadLock：是指两个或两个以上的进程在执行过程中,因争夺资源而造成的一种互相等待的现象,若无外力作用，它们都将无法推进下去，此时称系统处于死锁状态或系统产生了死锁，这些永远在互相等待的进程称为死锁进程。
表级锁不会产生死锁 ，所以解决死锁主要还是针对于最常用的InnoDB
死锁的关键在于：两个(或以上)的Session加锁的顺序不一致。那么对应的解决死锁问题的关键就是：让不同的session加锁有次序

1.2 产生示例

1.2.1 案例一

例如两个用户同时投资，A 用户金额随机分为 2 份，分给借款人 1，2，B 用户金额随机分为 2 份，分给借款人 2，1。由于加锁的顺序不一样，死锁当然很快就出现了。
对于这个问题的改进很简单，直接把所有分配到的借款人直接一次锁住就行了

Select * from xxx where id in (xx,xx,xx) for update 

在 in 里面的列表值 mysql 是会自动从小到大排序，加锁也是一条条从小到大加的锁
例如（以下会话id为主键）：

Session1: mysql> select * from t3 where id in (8,9) for update; +----+--------+------+---------------------+ | id | course | name | ctime | +----+--------+------+---------------------+ | 8 | WA | f | 2016-03-02 11:36:30 | | 9 | JX | f | 2016-03-01 11:36:30 | +----+--------+------+---------------------+ rows in set (0.04 sec) 

Session2: select * from t3 where id in (10,8,5) for update; 

锁等待中 … 其实这个时候 id=10 这条记录没有被锁住的，但 id=5 的记录已经被锁住了，锁的等待在id=8的这里
不信请看:

Session3: mysql> select * from t3 where id=5 for update; 

锁等待中

Session4: mysql> select * from t3 where id=10 for update; +----+--------+------+---------------------+ | id | course | name | ctime | +----+--------+------+---------------------+ | 10 | JB | g | 2016-03-10 11:45:05 | +----+--------+------+---------------------+ row in set (0.00 sec) 

在其它session中id=5是加不了锁的，但是id=10是可以加上锁的。

1.2.2 案例二

Session1: select * from t3 where id=22 for update; Empty set (0.00 sec) 

session2: select * from t3 where id=23 for update; Empty set (0.00 sec) 

Session1: insert into t3 values(22,'ac','a',now()); 

锁等待中……

Session2: insert into t3 values(23,'bc','b',now()); ERROR 1213 (40001): Deadlock found when trying to get lock; try restarting transaction 

当对存在的行进行锁的时候(主键)，mysql就只有行锁。当对未存在的行进行锁的时候(即使条件为主键)，mysql是会锁住一段范围（有gap锁）
锁住的范围为：
无穷小或小于表中锁住id的最大值，无穷大或大于表中锁住id的最小值,如：如果表中目前有已有的id为（11 ， 12）,那么就锁住（12，无穷大）。如果表中目前已有的id为（11 ， 30），那么就锁住（11，30）

对于这种死锁的解决办法是：

insert into t3(xx,xx) on duplicate key update xx='XX'; 

用mysql特有的语法来解决此问题。因为insert语句对于主键来说，插入的行不管有没有存在，都会只有行锁

1.2.3 案例三

mysql> select * from t3 where id=9 for update; +----+--------+------+---------------------+ | id | course | name | ctime | +----+--------+------+---------------------+ | 9 | JX | f | 2016-03-01 11:36:30 | +----+--------+------+---------------------+ row in set (0.00 sec) 

Session2: mysql> select * from t3 where id<20 for update; 

锁等待中

Session1: mysql> insert into t3 values(7,'ae','a',now()); ERROR 1213 (40001): Deadlock found when trying to get lock; try restarting transaction 

这个跟案例一其它是差不多的情况，只是session1不按常理出牌了， Session2在等待Session1的id=9的锁，session2又持了1到8的锁（注意9到19的范围并没有被session2锁住），最后，session1在插入新行时又得等待session2,故死锁发生了
这种一般是在业务需求中基本不会出现，因为锁住了id=9，却又想插入id=7的行，这就有点跳了，当然肯定也有解决的方法，那就是重理业务需求，避免这样的写法

1.2.4 案例四

一般的情况，两个session分别通过一个sql持有一把锁，然后互相访问对方加锁的数据产生死锁。

1.2.5 案例五

两个单条的sql语句涉及到的加锁数据相同，但是加锁顺序不同，导致了死锁。

1.2.6 案例六

死锁场景如下：

CREATE TABLE dltask ( id bigint unsigned NOT NULL AUTO_INCREMENT COMMENT ‘auto id’, a varchar(30) NOT NULL COMMENT ‘uniq.a’, b varchar(30) NOT NULL COMMENT ‘uniq.b’, c varchar(30) NOT NULL COMMENT ‘uniq.c’, x varchar(30) NOT NULL COMMENT ‘data’, PRIMARY KEY (id), UNIQUE KEY uniq_a_b_c (a, b, c) ) ENGINE=InnoDB DEFAULT CHARSET=utf8 COMMENT=’deadlock test’; 

a，b，c三列，组合成一个唯一索引，主键索引为id列。
MySQL事务隔离级别：RR (Repeatable Read)

每个事务只有一条SQL:

delete from dltask where a=? and b=? and c=?; 

众所周知，InnoDB上删除一条记录，并不是真正意义上的物理删除，而是将记录标识为删除状态。(注：这些标识为删除状态的记录，后续会由后台的Purge操作进行回收，物理删除。但是，删除状态的记录会在索引中存放一段时间。)
在RR隔离级别下，唯一索引上满足查询条件，但是却是删除记录，如何加锁？
InnoDB在此处的处理策略与前两种策略均不相同，或者说是前两种策略的组合：对于满足条件的删除记录，InnoDB会在记录上加next key lock X(对记录本身加X锁，同时锁住记录前的GAP，防止新的满足条件的记录插入。) Unique查询，三种情况，对应三种加锁策略，总结如下：
此处，看到了next key锁，是否很眼熟？对了，前面死锁中事务1，事务2处于等待状态的锁，均为next key锁。明白了这三个加锁策略，其实构造一定的并发场景，死锁的原因已经呼之欲出。但是，还有一个前提策略需要介绍，那就是InnoDB内部采用的死锁预防策略。

• 找到满足条件的记录，并且记录有效，则对记录加X锁(排他锁)，No Gap锁(lock_mode X locks rec but not gap)；
• 找到满足条件的记录，但是记录无效(标识为删除的记录)，则对记录加next key锁(同时锁住记录本身，以及记录之前的Gap：lock_mode X);
• 未找到满足条件的记录，则对第一个不满足条件的记录加Gap锁，保证没有满足条件的记录插入(locks gap before rec)；

1.3 死锁预防策略

InnoDB引擎内部(或者说是所有的数据库内部)，有多种锁类型：事务锁(行锁、表锁)，Mutex(保护内部的共享变量操作)、RWLock(又称之为Latch，保护内部的页面读取与修改)。

InnoDB每个页面为16K，读取一个页面时，需要对页面加S锁(共享锁)，更新一个页面时，需要对页面加上X锁(排他锁)。任何情况下，操作一个页面，都会对页面加锁，页面锁加上之后，页面内存储的索引记录才不会被并发修改。

因此，为了修改一条记录，InnoDB内部如何处理：

• 根据给定的查询条件，找到对应的记录所在页面；
• 对页面加上X锁(RWLock)，然后在页面内寻找满足条件的记录；
• 在持有页面锁的情况下，对满足条件的记录加事务锁(行锁：根据记录是否满足查询条件，记录是否已经被删除，分别对应于上面提到的3种加锁策略之一)；

死锁预防策略：相对于事务锁，页面锁是一个短期持有的锁，而事务锁(行锁、表锁)是长期持有的锁。因此，为了防止页面锁与事务锁之间产生死锁，InnoDB做了死锁预防的策略：持有事务锁(行锁、表锁)，可以等待获取页面锁；但反之，持有页面锁，不能等待持有事务锁。
根据死锁预防策略，在持有页面锁，加行锁的时候，如果行锁需要等待。则释放页面锁，然后等待行锁。
此时，行锁获取没有任何锁保护，因此加上行锁之后，记录可能已经被并发修改。因此，此时要重新加回页面锁，重新判断记录的状态，重新在页面锁的保护下，对记录加锁。如果此时记录未被并发修改，那么第二次加锁能够很快完成，因为已经持有了相同模式的锁。但是，如果记录已经被并发修改，那么，就有可能导致本文前面提到的死锁问题。

以上的InnoDB死锁预防处理逻辑，对应的函数，是row0sel.c::row_search_for_mysql()。感兴趣的朋友，可以跟踪调试下这个函数的处理流程，很复杂，但是集中了InnoDB精髓

1.4 剖析死锁的成因

做了这么多铺垫，有了Delete操作的3种加锁逻辑、InnoDB的死锁预防策略等准备知识之后，再回过头来分析本文最初提到的死锁问题，就会手到拈来，事半而功倍
首先，假设dltask中只有一条记录：(1, ‘a’, ‘b’, ‘c’, ‘data’)。三个并发事务，同时执行以下的这条SQL：

delete from dltask where a=’a’ and b=’b’ and c=’c’; 

1.5 解除死锁的占用

1.5.1 死锁分析

查看InnoDB_row_lock%相关变量

show status like 'innodb_row_lock%'; 

字段说明：

• Innodb_row_lock_current_waits：当前正在等待锁定的数量
• Innodb_row_lock_time：等待总时长: 从系统启动到现在锁定总时间长度
• Innodb_row_lock_time_avg：等待平均时长: 每次等待所花平均时间
• Innodb_row_lock_time_max：从系统启动到现在等待最长的一次所花时间
• Innodb_row_lock_waits：等待总次数: 系统启动后到现在总共等待的次数

查看 INFORMATION_SCHEMA系统库，我们可以通过 INFORMATION_SCHEMA系统库提供的：查看事务、锁、锁等待的 数据表 来分析

-- 查看事务 select * from INFORMATION_SCHEMA.INNODB_TRX; -- 查看锁 select * from INFORMATION_SCHEMA.INNODB_LOCKS; -- 查看锁等待 select * from INFORMATION_SCHEMA.INNODB_LOCK_WAITS; -- 查看连接情况 select * from INFORMATION_SCHEMA.PROCESSLIST; -- 查看锁等待 select * from INFORMATION_SCHEMA.INNODB_LOCK_WAITS; -- 查看死锁日志 show engine innodb status 

1.5.2 死锁解决

锁表怎么解决？MySQL锁表怎么解锁：

1. 查进程，主要是查找被锁表的那个进程的ID：SHOW PROCESSLIST;
2. kill掉锁表的进程ID：KILL 10866;后面的数字即时进程的ID

注意：筛选报错

-- 筛选报错 show processlist where user = 'root'; -- 筛选可用 select * from information_schema.processlist where user = 'root'; 

1.5.3 MySQL中配置

在 MySQL中，可以通过以下配置来管理和调整死锁的处理：

• innodb_deadlock_detect：默认情况下，该选项启用了InnoDB存储引擎的死锁检测机制。可以通过设置该选项为0来禁用死锁检测，但这会增加发生死锁的风险。
  SET GLOBAL innodb_deadlock_detect = 0;
  
• innodb_deadlock_detect_interval：该选项用于配置死锁检测的时间间隔，默认为1秒。可以通过增加或减少该值来调整死锁检测的频率。
  SET GLOBAL innodb_deadlock_detect_interval = <interval>;
  
• innodb_lock_wait_timeout：该选项配置了InnoDB存储引擎的锁等待超时时间，默认为50秒。如果一个事务在等待锁定的时间超过该值，将会被自动回滚。
  SET GLOBAL innodb_lock_wait_timeout = <timeout>;
  
• innodb_print_all_deadlocks：该选项配置了是否将所有死锁信息都输出到错误日志中，默认为OFF。可以将其设置为ON来启用输出所有死锁信息。
  SET GLOBAL innodb_print_all_deadlocks = ON;
  
• show engine innodb status：通过执行该语句，可以查看InnoDB存储引擎的状态信息，包括死锁相关的信息。
  SHOW ENGINE INNODB STATUS;
  

1.6 给数据表增加一列

在 MySQL 中，使用 InnoDB 存储引擎给数据表增加一列时，并不一定会锁表。InnoDB 存储引擎提供了一些机制来减少对表的锁定，以提高并发性能。

1.6.1 MySQL 5.6

从 MySQL 5.6 版本开始，InnoDB 引擎引入了在线数据定义语言（DDL）操作，其中包括对表结构的修改。这些在线 DDL 操作允许在不锁定整个表的情况下进行结构更改。具体来说，以下是可能的情况：

• 对于增加非空列： 在 InnoDB 中，增加非空列时，会执行一个快速的元数据操作，不会锁定整个表。这意味着在修改期间，其他会话可以继续读取和写入表数据。
• 对于增加可为空列： 在 InnoDB 中，增加可为空列时，也会执行一个快速的元数据操作，不会锁定整个表。其他会话可以继续读取和写入表数据，但在修改期间，可能会有一些短暂的行锁定。

注意：尽管 InnoDB 存储引擎提供了较少的锁定，但在执行 ALTER TABLE 语句时仍可能会有一些性能影响。这可能是由于内部的元数据操作、数据重组或日志写入等引起的。
因此，在对大型表进行结构修改时，仍建议在低负载时执行，以最小化对应用程序的影响。

1.6.2 MySQL 8.0

MySQL 8.0 在处理大数据表增加字段的情况下进行了一些优化，进一步优化了减少对表的锁定时间和降低性能影响。在 MySQL8.0 中，还引入了Invisible Indexes、Instant DDL和In-Place Alter升级等新功能，可以进一步提高MySQL的性能和可维护性。

• 原子 DDL： MySQL 8.0 引入了原子 DDL（Atomic DDL）操作，这意味着 ALTER TABLE 语句的执行过程中将会有更少的阻塞。在增加字段的情况下，原子 DDL 机制可以减少对表的锁定时间，并允许其他会话继续读取和写入数据。
• 立即更新元数据： MySQL 8.0 在增加字段时立即更新表的元数据，而不需要等待整个操作完成。这样可以更快地完成 ALTER TABLE 操作，并减少对表的锁定时间。
• InnoDB 引擎优化： MySQL 8.0 的 InnoDB 存储引擎针对大数据表的结构修改进行了一些优化。例如，对于增加非空字段，InnoDB 不再需要复制整个表的数据。相反，它会使用一种更轻量级的操作来添加新字段，从而减少锁定时间和资源消耗。
• 增量元数据更新： MySQL 8.0 引入了增量元数据更新，这意味着在 ALTER TABLE 操作期间只需更新受影响的元数据信息，而不是整个表。这样可以减少锁定时间和操作的开销。