锁是计算机协调多个进程或线程并发访问某一资源的机制。在数据库中,除传统的计算资源(CPU、RAM、I/O
)的争用以外,数据也是一种供许多用户共享的资源。如何保证数据并发访问的一致性、有效性是所有数据库必须解决的一个问题,锁冲突也是影响数据库并发访问性能的一个重要因素。从这个角度来说,锁对数据库而言显得尤其重要,也更加复杂。
MySQL中的锁,按照锁的粒度分,分为以下三类:
全局锁就是对整个数据库实例加锁,加锁后整个实例就处于只读状态,后续的DML的写语句,DDL语句,已及更新操作的事务提交语句都将被阻塞。
其典型的使用场景是做全库的逻辑备份,对所有的表进行锁定,从而获取一致性视图,保证数据的完整性。为什么全库逻辑备份,就需要加全局锁呢?
我们分别来对加与不加全局锁的情况进行分析。
不加全局锁
假设在数据库中存在这样三张表: tb_stock
库存表,tb_order
订单表,tb_orderlog
订单日志表。
假设我们备份数据库时进行如下的操作:
在进行数据备份时,先备份了tb_stock
库存表。
然后接下来,在业务系统中,执行了下单操作,扣减库存,生成订单(更新tb_stock
表,插入tb_order
表)。
然后再执行备份 tb_order
表的逻辑。
业务中执行插入订单日志操作。
最后,又备份了tb_orderlog
表。
此时备份出来的数据,是存在问题的。因为备份出来的数据,tb_stock
表与tb_order
表的数据不一致(有最新操作的订单信息,但是库存数没减)。
加了全局锁
对数据库进行进行逻辑备份之前,先对整个数据库加上全局锁,一旦加了全局锁之后,其他的DDL、DML全部都处于阻塞状态,但是可以执行DQL语句,也就是处于只读状态,而数据备份就是查询操作。那么数据在进行逻辑备份的过程中,数据库中的数据就是不会发生变化的,这样就保证了数据的一致性和完整性。
加全局锁
flush tables with read lock ;
数据备份
mysqldump -uroot –p1234 study > study.sql
数据备份的相关指令,在后面MySQL管理章节,还会详细讲解。
释放锁
unlock tables ;
数据库中加全局锁,是一个比较重的操作,存在以下问题:
在InnoDB引擎中,我们可以在备份时加上参数 --single-transaction
参数来完成不加锁的一致性数据备份。
mysqldump --single-transaction -uroot –p123456 study > study.sql
表级锁,每次操作锁住整张表。锁定粒度大,发生锁冲突的概率最高,并发度最低。应用在MyISAM、InnoDB、BDB
等存储引擎中。
对于表级锁,主要分为以下三类:
对于表锁,分为两类:
其语法如下:
锁的状态 | 语法 |
---|---|
加锁 | lock tables 表名... read/write |
释放锁 | unlock tables 或 直接退出客户端 |
需要注意的是,表锁除了会限制别的线程的读写外,也会限制本线程接下来的读写操作。也就是说如果本线程对表加了「共享表锁」,那么本线程接下来如果要对表执行写操作的语句,是会被阻塞的,当然其他线程对表进行写操作时也会被阻塞,直到锁被释放。
读锁不会阻塞其他客户端的读,但是会阻塞写。写锁既会阻塞其他客户端的读,又会阻塞其他客户端的写。
也就是说如果本线程对学生表加了「共享表锁」,那么本线程接下来如果要对学生表执行写操作的语句,是会被阻塞的,当然其他线程对学生表进行写操作时也会被阻塞,直到锁被释放。
meta data lock
, 元数据锁,简写MDL。MDL加锁过程是系统自动控制,无需显式使用,在访问一张表的时候会自动加上。MDL锁主要作用是维护表元数据的数据一致性,在表上有活动事务的时候,不可以对元数据进行写入操作。为了避免DML与DDL冲突,保证读写的正确性。
这里的元数据,大家可以简单理解为就是一张表的表结构。 也就是说,某一张表涉及到未提交的事务时,是不能够修改这张表的表结构的。
在MySQL5.5中引入了MDL,当对一张表进行增删改查的时候,加MDL读锁(共享);当对表结构进行变更操作的时候,加MDL写锁(排他)。
常见的SQL操作时,所添加的元数据锁:
对应SQL | 锁类型 | 说明 |
---|---|---|
lock tables xxx read / write |
SHARED_READ_ONLY / SHARED_NO_READ_WRITE |
|
select 、select ... lock in share mode |
SHARED_READ |
与SHARED_READ、SHARED_WRITE 兼容,与EXCLUSIVE 互斥 |
insert 、update、delete、select ... for update |
SHARED_WRITE |
与SHARED_READ、SHARED_WRITE 兼容,与EXCLUSIVE 互斥 |
alter table ... |
EXCLUSIVE |
与其他的MDL 都互斥 |
SELECT、INSERT、UPDATE、DELETE
等语句时,添加的是元数据共享锁(SHARED_READ / SHARED_WRITE
),之间是兼容的。SHARED_READ
),会阻塞元数据排他锁(EXCLUSIVE
),之间是互斥的。我们可以通过下面的SQL语句来查看数据库中的元数据锁的情况:
select object_type,object_schema,object_name,lock_type,lock_duration from performance_schema.metadata_locks ;
为了避免DML在执行时,加的行锁与表锁的冲突,在InnoDB中引入了意向锁,使得表锁不用检查每行数据是否加锁,使用意向锁来减少表锁的检查。假如没有意向锁,客户端一对表加了行锁后,客户端二如何给表加表锁呢,来通过示意图简单分析一下有无意向锁的两种情况。意向锁的目的是为了快速判断表里是否有记录被加锁。
没有意向锁
首先客户端一,开启一个事务,然后执行DML操作,在执行DML语句时,会对涉及到的行加行锁。
当客户端二,想对这张表加表锁时,会检查当前表是否有对应的行锁,如果没有,则添加表锁,此时就会从第一行数据,检查到最后一行数据,效率较低。
存在意向锁
有了意向锁之后,客户端一,在执行DML操作时,会对涉及的行加行锁,同时也会对该表加上意向锁。
而其他客户端,在对这张表加表锁的时候,会根据该表上所加的意向锁来判定是否可以成功加表锁,而不用逐行判断行锁情况了。
意向锁分为下面两类:
select ... lock in share mode
添加 。 与 表锁的共享锁(read)兼容,与表锁的排他锁(write)互斥。insert、update、delete、select...for update
添加 。与表锁共享锁(read)及排他锁(write)都互斥,意向锁之间不会互斥。一旦事务提交了,意向共享锁、意向排他锁,都会自动释放。
可以通过以下SQL,查看意向锁及行锁的加锁情况:
select object_schema,object_name,index_name,lock_type,lock_mode,lock_data from performance_schema.data_locks;
注意:
- 意向共享锁与表读锁是兼容的
- 意向排他锁与表锁的读锁、写锁都是互斥的
自增锁,听名字就知道,在表的主键设置为自动增加的时候会上的锁。表里的主键通常都会设置成自增的,这是通过对主键字段声明 AUTO_INCREMENT
属性实现的。之后可以在插入数据时,可以不指定主键的值,数据库会自动给主键赋值递增的值,这主要是通过 AUTO-INC
锁实现的。
AUTO-INC
锁是特殊的表锁机制,锁不是在一个事务提交后才释放,而是在执行完插入语句后就会立即释放。在插入数据时,会加一个表级别的 AUTO-INC
锁,然后为被 AUTO_INCREMENT
修饰的字段赋值递增的值,等插入语句执行完成后,才会把 AUTO-INC
锁释放掉。
一个事务在持有 AUTO-INC
锁的过程中,其他事务的如果要向该表插入语句都会被阻塞,从而保证插入数据时,被 AUTO_INCREMENT
修饰的字段的值是连续递增的。但是, AUTO-INC
锁再对大量数据进行插入的时候,会影响插入性能,因为另一个事务中的插入会被阻塞。
因此,MySQL的InnoDB引擎提供了一种轻量级的自增锁。该轻量级的自增锁在插入数据的时候,会为被AUTO_INCREMENT
修饰的字段加上轻量级锁,然后给该字段赋值一个自增的值,就把这个轻量级锁释放了,而不需要等待整个插入语句执行完后才释放锁。
可以使用 show variables like '%innodb_autoinc_lock_mode%';
语句查看控制自增锁的变量的值,该变量的值有0,1,2三种。
innodb_autoinc_lock_mode = 0
:采用 AUTO-INC 锁,语句执行结束后才释放锁;innodb_autoinc_lock_mode = 2
:采用轻量级锁,申请自增主键后就释放锁,并不需要等语句执行后才释放;innodb_autoinc_lock_mode = 1
:对于普通的insert语句,自增锁在申请之后就马上释放;类似 insert … select 这样的批量插入数据的语句,自增锁还是要等语句结束后才被释放。需要注意的是:
- 虽然
innodb_autoinc_lock_mode = 2
是性能最高的一种方式,但是其搭配 binlog 的statement
格式一起使用的时候,在主从复制中会发生数据不一致问题- 当使用
innodb_autoinc_lock_mode = 2
时,需要将 binlog_format 的格式设置为row
,这样既能提升并发性,又不会出现数据一致性问题
行级锁,每次操作锁住对应的行数据。锁定粒度最小,发生锁冲突的概率最低,并发度最高。应用在InnoDB存储引擎中。
nnoDB实现了以下两种类型的行锁:
行锁之中只有共享锁与共享锁之间能够兼容,其余组合都不兼容
InnoDB的数据是基于索引组织的,行锁是通过对索引上的索引项加锁来实现的,而不是对记录加的锁。对于行级锁,主要分为以下三类:
记录锁(Record Lock):锁定单个行记录的锁,防止其他事务对此行进行update和delete。在RC、RR隔离级别下都支持。
间隙锁(Gap Lock):锁定索引记录间隙(不含该记录),确保索引记录间隙不变,防止其他事务在这个间隙进行insert,产生幻读。在RR隔离级别下都支持。
临键锁(Next-Key Lock):行锁和间隙锁组合,同时锁住数据,并锁住数据前面的间隙Gap。在RR隔离级别下支持。
记录锁其实很好理解,对表中的记录加锁,叫做记录锁,简称行锁。比如
SELECT * FROM `test` WHERE `id`=1 FOR UPDATE;
它会在 id=1 的记录上加上记录锁,以阻止其他事务插入,更新,删除 id=1 这一行。
需要注意的是:
X
)锁,所以会阻塞其他事务对其插入、更新、删除。间隙锁只存在于可重复读隔离级别,目的是为了解决可重复读隔离级别下幻读的现象。
间隙锁定是对索引记录之间的间隙的锁定,或者是对第一个或最后一个索引记录之前的间隙的锁定。间隙可能跨越单个索引值,多个索引值,甚至为空。使用间隙锁锁住的是一个区间,而不仅仅是这个区间中的每一条数据。
间隙锁唯一目的是防止其他事务插入间隙。间隙锁可以共存,一个事务采用的间隙锁不会阻止另一个事务在同一间隙上采用间隙锁。
接下来我们间隙锁的不同情况进行分析。假设创建有如下的数据表:
CREATE TABLE `gap_test` (
`id` INT(11) NOT NULL,
`name` VARCHAR(50) NULL DEFAULT NULL,
`age` INT(11) NULL DEFAULT NULL,
PRIMARY KEY (`id`)
)
ENGINE=InnoDB;
insert into gap_test(id,name,age)values(2,'海月',20);
insert into gap_test(id,name,age)values(7,'吕布',30);
insert into gap_test(id,name,age)values(10,'马可',28);
insert into gap_test(id,name,age)values(15,'曹操',40);
唯一索引的范围查询
我们查询的动作如下:
事务1:
select * from gap_test where id <=7 for update;
事务2:
insert into gap_test(id,name,age)values(1,'亚连',20); -- 阻塞
insert into gap_test(id,name,age)values(5,'亚连',20);-- 阻塞
insert into gap_test(id,name,age)values(8,'亚连',20); -- 成功
说明在区间 (-无穷大, 7]
之间是存在间隙锁的。
查询唯一索引中不存在的数据
我们查询的动作如下:
事务1:
select * from gap_test where id = 5 for update;
事务2:
insert into gap_test(id,name,age)values(4,'亚连',20); -- 阻塞
insert into gap_test(id,name,age)values(1,'亚连',20); -- 成功
insert into gap_test(id,name,age)values(9,'亚连',20); -- 成功
说明在区间 (2, 7]
之间是存在间隙锁的。
普通索引的范围查询
我们对上面的 age
字段建立一个索引,
CREATE INDEX idx_gap_age ON gap_test(age);
然后我们的查询如下:
事务1:
select * from gap_test where age <=30 for update;
事务2:
insert into gap_test(id,name,age)values(20,'赔钱虎',20); -- 阻塞
insert into gap_test(id,name,age)values(21,'赔钱虎',31); -- 阻塞
insert into gap_test(id,name,age)values(22,'赔钱虎',60); -- 成功
insert into gap_test(id,name,age)values(23,'赔钱虎',40); -- 成功
insert into gap_test(id,name,age)values(24,'赔钱虎',39); -- 阻塞
我们发现一样会进行阻塞,不过其与主键的间隙锁不同的是,其阻塞的范围包含的是 [20,30]
以及 [30,40]
,即将30这个索引的左边和右边都上了间隙锁,不过,如果条件改为 age <30
则不会上锁右边的区间。
查询普通索引中不存在的数据
我们查询的动作如下:
事务1:
select * from gap_test where age = 26 for update;
事务2:
insert into gap_test(id,name,age)values(30,'亚连',28); -- 成功
insert into gap_test(id,name,age)values(31,'亚连',20); -- 阻塞
insert into gap_test(id,name,age)values(32,'亚连',31); -- 成功
说明在区间 (20, 28)
之间是存在间隙锁的,并且,其还对 20
这个索引值加上了记录锁,为什么还需要加上一个记录锁呢?这种情况就是下面我们要将的临键锁了。
临键锁,是记录锁与间隙锁的组合,它的封锁范围,既包含索引记录,又包含索引区间。默认情况下,InnoDB在 REPEATABLE READ
事务隔离级别运行,InnoDB使用 next-key 锁进行搜索和索引扫描,以防止幻读。
InnoDB执行行级锁定的方式是,当它搜索或扫描表索引时,会在遇到的索引记录上设置共享或互斥锁。因此,行级锁实际上是索引记录锁。索引记录上的临键锁定也会影响该索引记录之前的“间隙”。即,临键锁定是索引记录锁定加上索引记录之前的间隙上的间隙锁定。如果一个会话R在索引中的记录上具有共享或排他锁 ,则另一会话不能R在索引顺序之前的间隙中插入新的索引记录 。
需要注意的是:
临键锁的主要目的,也是为了避免幻读(Phantom Read)。如果把事务的隔离级别降级为RC,临键锁则也会失效。
索引上的等值查询(唯一索引),给不存在的记录加锁时, 优化为间隙锁 。
索引上的等值查询(非唯一普通索引),向右遍历时最后一个值不满足查询需求时,next-key lock
退化为间隙锁。
我们知道InnoDB的B+树索引,叶子节点是有序的双向链表。 假如,我们要根据这个二级索引查询值为18的数据,并加上共享锁,我们是只锁定18这一行就可以了吗? 并不是,因为是非唯一索引,这个结构中可能有多个18的存在,所以,在加锁时会继续往后找,找到一个不满足条件的值(当前案例中也就是29)。此时会对18加临键锁,并对29之前的间隙加锁。
索引上的范围查询(唯一索引)——会访问到不满足条件的第一个值为止。
针对唯一索引进行检索时,对已存在的记录进行等值匹配时,将会自动优化为记录锁。