提到事务,你肯定不陌生,和数据库打交道的时候,我们总是会用到事务。最经典的例子就是转账,你要给朋友小王转100块钱,而此时你的银行卡只有100块钱。
转账过程具体到程序里会有一系列的操作,比如查询余额、做加减法、更新余额等,这些操作必须保证是一体的,不然等程序查完之后,还没做减法之前,你这100块钱,完全可以借着这个时间差再查一次,然后再给另外一个朋友转账,如果银行这么整,不就乱了么?这时就要用到事务
这个概念了。
简单来说,事务就是要保证一组数据库操作,要么全部成功,要么全部失败。在MySQL中,事务支持是在引擎层实现的。你现在知道,MySQL是一个支持多引擎的系统,但并不是所有的引擎都支持事务。比如MySQL原生的MyISAM引擎就不支持事务
,这也是MyISAM被InnoDB取代的重要原因之一。
今天的文章里,我将会以InnoDB
为例,剖析MySQL在事务支持方面的特定实现,并基于原理给出相应的实践建议,希望这些案例能加深你对MySQL事务原理的理解。
提到事务,你肯定会想到ACID
(Atomicity、Consistency、Isolation、Durability,即原子性
、一致性
、隔离性
、持久性
),今天我们就来说说其中Isolation
,也就是隔离性
。
当数据库上有多个事务同时执行的时候,就可能出现脏读
(dirty read)、不可重复读
(non-repeatable read)、幻读
(phantom read)的问题,为了解决这些问题,就有了隔离级别
的概念。
隔离性 | 具体含义 |
---|---|
脏读 | B事务更改数据还未提交,A事务已经看到并且用了。B事务如果回滚,则A事务做错了 |
不可重复读 | 不可重复读的重点是修改: 同样的条件, 你读取过的数据, 再次读取出来发现值不一样了,只需要锁住满足条件的记录 |
幻读 | 幻读的重点在于新增或者删除 同样的条件, 第1次和第2次读出来的记录数不一样 ,要锁住满足条件及其相近的记录 |
在谈隔离级别之前,你首先要知道,你隔离得越严实,效率就会越低
。因此很多时候,我们都要在二者之间寻找一个平衡点。SQL标准的事务隔离级别由低到高
包括:
用大白话说下上述的含义:
读未提交:别人改数据的事务尚未提交,我在我的事务中也能读到。
读已提交(Oracle默认):别人改数据的事务已经提交,我在我的事务中才能读到。
可重复读(MySQL默认):别人改数据的事务已经提交,我在我的事务中也不去读,以此保证重复读一致性。
串行:我的事务尚未提交,别人就别想改数据。
这4种隔离级别,并行性能依次降低,安全性依次提高。
其中读提交
和可重复读
比较难理解,所以我用一个例子说明这几种隔离级别。假设数据表T
中只有一列,其中一行的值为1,下面是按照时间顺序执行两个事务的行为。
mysql> create table T(c int) engine=InnoDB;
insert into T(c) values(1);
我们来看看在不同的隔离级别下,事务A会有哪些不同的返回结果,也就是图里面V1、V2、V3的返回值分别是什么。
隔离级别 | 结果 |
---|---|
读未提交 | 这时候事务B虽然还没有提交,但是结果已经被A看到了。V1=2、V2=2、V3=2 |
读提交 | 事务B的更新在提交后才能被A看到。V1=1、V2=2、V3=2 |
可重复读 | 事务在执行期间看到的数据前后必须是一致的。V1=1、V2=1、V3=2 |
串行化 | 则在事务B执行将1改成2的时候,会被锁住。直到事务A提交后,事务B才可以继续执行。V1=1、V2=1、V3=2 |
在实现上,数据库里面会创建一个视图
,访问的时候以视图的逻辑结果为准。
读未提交
隔离级别下直接返回记录上的最新值,没有视图概念读提交
隔离级别下,这个视图(read-view)是在每个SQL语句开始执行的时候创建的.可重复读
隔离级别下,这个视图是在事务启动时创建的,整个事务存在期间都用这个视图。串行化
隔离级别下直接用加锁的方式来避免并行访问。我们可以看到在不同的隔离级别下,数据库行为是有所不同的。Oracle数据库的默认隔离级别其实就是读提交
,因此对于一些从Oracle迁移到MySQL(默认可重复读)的应用,为保证数据库隔离级别的一致,你一定要记得将MySQL的隔离级别设置为读提交
。
mysql> show variables like 'transaction_isolation';
+-----------------------+----------------+
| Variable_name | Value |
+-----------------------+----------------+
| transaction_isolation | READ-COMMITTED |
+-----------------------+----------------+
总结来说,存在即合理,哪个隔离级别都有它自己的使用场景,你要根据自己的业务情况来定。我想你可能会问那什么时候需要可重复读
的场景呢?我们来看一个数据校对逻辑的案例。
假设你在管理一个 个人银行账户表。一个表存了每个月月底的余额,一个表存了账单明细。这时候你要做数据校对,也就是判断上个月的余额和当前余额的差额,是否与本月的账单明细一致。你一定希望在校对过程中,即使有用户发生了一笔新的交易,也不影响你的校对结果。
这时候使用可重复读
隔离级别就很方便。事务启动时的视图可以认为是静态的,不受其他事务更新的影响。
理解了事务的隔离级别,我们再来看看事务隔离具体是怎么实现的。这里我们展开说明可重复读
。
在MySQL中,实际上每条记录在更新的时候都会同时记录一条回滚操作。记录上的最新值,通过回滚操作,都可以得到前一个状态的值。
假设一个值从1被按顺序改成了2、3、4,在回滚日志里面就会有类似下面的记录。
当前值是4,但是在查询这条记录的时候,不同时刻启动的事务会有不同的read-view。如图中看到的,在视图A、B、C里面,这一个记录的值分别是1、2、4,同一条记录在系统中可以存在多个版本,就是数据库的多版本并发控制(MVCC)。对于read-view A,要得到1,就必须将当前值依次执行图中所有的回滚操作得到。
同时你会发现,即使现在有另外一个事务正在将4改成5,这个事务跟read-view A、B、C对应的事务是不会冲突的。
你一定会问,回滚日志总不能一直保留吧,什么时候删除呢?答案是,在不需要的时候才删除。也就是说,系统会判断,当没有事务再需要用到这些回滚日志时,回滚日志会被删除。
什么时候才不需要了呢?就是当系统里没有比这个回滚日志更早的read-view的时候。
基于上面的说明,我们来讨论一下为什么建议你尽量不要使用长事务。
长事务意味着系统里面会存在很老的事务视图。由于这些事务随时可能访问数据库里面的任何数据,所以这个事务提交之前,数据库里面它可能用到的回滚记录都必须保留,这就会导致大量占用存储空间。
在MySQL 5.5及以前的版本,回滚日志是跟数据字典一起放在ibdata文件里的,即使长事务最终提交,回滚段被清理,文件也不会变小。我见过数据只有20GB,而回滚段有200GB的库。最终只好为了清理回滚段,重建整个库。
除了对回滚段的影响,长事务还占用锁资源,也可能拖垮整个库,这个我们会在后面讲锁的时候展开。
如前面所述,长事务有这些潜在风险,我当然是建议你尽量避免。其实很多时候业务开发同学并不是有意使用长事务,通常是由于误用所致。MySQL的事务启动方式有以下几种:
begin
或 start transaction
。配套的提交语句是commit
,回滚语句是rollback
。有些客户端连接框架会默认连接成功后先执行一个set autocommit=0
的命令。这就导致接下来的查询都在事务中,如果是长连接,就导致了意外的长事务。
因此,我会建议你总是使用set autocommit=1, 通过显式语句的方式来启动事务。
但是有的开发同学会纠结多一次交互
的问题。对于一个需要频繁使用事务的业务,第二种方式每个事务在开始时都不需要主动执行一次 begin
,减少了语句的交互次数。如果你也有这个顾虑,我建议你使用commit work and chain
语法。
在autocommit为1的情况下,用begin显式启动的事务,如果执行commit
则提交事务。如果执行 commit work and chain
则是提交事务并自动启动下一个事务,这样也省去了再次执行begin语句的开销。同时带来的好处是从程序开发的角度明确地知道每个语句是否处于事务中。
你可以在information_schema
库的innodb_trx
这个表中查询长事务,比如下面这个语句,用于查找持续时间超过60s的事务。
select * from information_schema.innodb_trx where TIME_TO_SEC(timediff(now(),trx_started)) > 60
你现在知道了系统里面应该避免长事务,如果你是业务开发负责人同时也是数据库负责人,你会有什么方案来避免出现或者处理这种情况呢?
这个问题,我们可以从应用开发端
和数据库端
来看。
首先,从应用开发端
来看:
其次,从数据库端
来看:
这篇文章里面介绍了MySQL的事务隔离级别的现象和实现,根据实现原理分析了长事务存在的风险,以及如何用正确的方式避免长事务。希望我举的例子能够帮助你理解事务,并更好地使用MySQL的事务特性。