PostgreSQL和InnoDB的多版本实现原理和比较

在风清扬的博客多版本并发控制：PostgreSQL vs InnoDB中很好的阐述了PostgreSQL 和InnoDB的多版本并发控制原理，并根据自己的丰富经验进行了深入的对比。

多版本并发控制技术被很多数据库或存储引擎采用，如Oracle，MS SQL Server 2005+, PostgreSQL, Firebird, InnoDB, Falcon, PBXT, Maria等等。新的数据库存储引擎，几乎毫无例外的使用多版本而不是单版本加锁的方法实现并发控制，可以说多版本已经成为未来的发展趋势。

PostgreSQL的多版本实现原理(基于8.4.1版本)

PostgreSQL采用堆+B+树索引（忽视R树、哈希、GiST等不常用的索引）的存储结构，堆与索引的存储模式不同。

PostgreSQL里记录的新老版本都存在堆里，堆中每条记录header里都通过t_xmin和t_xmax来存储创建事务ID（creation transaction id）和销毁事务ID(destruction transaction id)。在他的另一篇博客从对数据访问扭曲的适应性评价PostgreSQL与InnoDB 里很简洁地介绍了这个实现策略：

PostgreSQL 处理多版本的简单逻辑是这样的：一个事务更新一个记录时产生一个新版本，并设置新版本的产生事务ID和和原版本的消亡事务ID为该事务ID。新旧版本除被组织成一个链表外，其物理存储没有任何其它联系，就好像是两个记录一般。事务在读取到一个版本时，通过这两个事务ID与当前事务ID之间的关系来判断它是否应该看到这个版本。这一实现策略相当简洁（对索引的多版本存储尤其是如此），通过索引访问时更不会有对回滚段的额外访问，可以消除事务回滚的代价。

更详细的数据结构和函数可以参考Inside PostgreSQL Shared Memory等文章。除此之外，事务提交日志和事务快照也被用来进一步保存版本的信息，包括事务的状态和当时活跃事务的列表等。而对于PostgreSQL，其索引是没有版本信息的。 通常更新每一条记录都会在该记录所在表的所有索引中插入相应的索引项。他在文中说这样会导致进行索引扫描时，即使查询所需所有属性在索引中都存在，也需要从堆中取出对应的记录判断是否可见除了：

在PostgreSQL 8.3中引入了HOT（Heap-Only-Tuple）技术，如果新老版本在同一页面，并且UPDATE没有更新任何索引属性，则不插入新版本对应的索引项。

对于事务的提交和回滚操作，风清扬认为：

事务提交或回滚时操作简单，除事务提交时要写出事务外，只需要更新事务提交日志中对应的事务状态。也就是说回滚时并不需要将事务所作的操作从物理上清理掉，只要将事务状态设为已经回滚，则该事务产生的版本对其它事务自然就不可见了。

他也给出了不需要的老旧版本的不可见处理方式：

老旧的不再需要的版本，即不会被将来的任何事务见到的版本的清理是通过VACUUM实现的。由于新老版本混杂在一起，进行VACUUM时本质上是需要扫描所有数据。8.4版中引入了Visibility Map技术，用来在VACUUM时跳过那些肯定不包含老旧版本的页面，但如果系统更新频繁且离散，这一技术就派不上大用场。在线的VACUUM只能清理页面中的老旧版本，但不能缩减表占用的空间，其实是产生碎片。要缩减表空间时的VACUUM会锁住表导致期间表不能被更新。

InnoDB的多版本实现（基于MySQL 5.1.33版本带的InnoDB）

InnoDB采用索引组织表的存储结构，没有堆，记录存储在主键索引中，其它索引称为二级索引，其中每个索引项都包含所对应记录的主键。主键索引与二级索引的存储格式也不同。

InnoDB的主键索引拥有版本化信息，除了主键被更新的情况需要存储多个版本，其他情况主键索引中只存储记录的最新版本，把旧版本的信息则集中存储在回滚段中：

主键索引记录的头上包含有6字节的事务ID与7字节指向回滚段中旧版本的指针。DELETE时只是标记而不真正删除。UPDATE时进行本地更新，并将前像写到回滚段中。

InnoDB中读视图（和PostgreSQL中事务快照类似），也记录了事务开始时的活跃事务列表：

根据读视图和记录头上的事务ID，可以判断出一个版本在事务开始时是否已经提交，即是否可见。如果存储在主键索引中的记录不可见，则根据指向回滚段中旧版本的指针找到旧版本信息，构造出旧的记录。回滚段采用的是append-only的日志型存储，记录的旧版本信息并不是一条完整的记录，而只是被更新的属性的前像。回滚段中的旧版本信息中也包含更旧的版本的位置，即版本链表是从新到旧的。

对于InnoDB的事务处理：

由于没有事务日志表示事务是否回滚，在事务回滚时必须清理该事务所进行的修改，插入的记录要删除，更新的记录要更新回来。事务提交时则无需处理。

如前所说，InnoDB的二级索引中的每个索引项并没有版本化信息：

但在页面头记录了对该页面操作的事务的ID的最大值，通过这一值可以判断页面中是否可能包含不可见的数据，如果是，则需要访问主键索引判断可见性。否则，可以直接从索引中获取查询所需属性。二级索引中可能存储一条记录的多个索引对应的索引项，如果UPDATE操作更新了某个索引的属性，则类似于 PostgreSQL，插入新索引项到二级索引中，老索引项并不删除。但没有被UPDATE操作更新的索引则不需要插入新索引项。

在文章的最后，作者分享了他个人对这两种实现方式的评价，优势为：

PostgreSQL与InnoDB的多版本实现最大的区别在于最新版本和历史版本是否分离存储，PostgreSQL不分，InnoDB分。

相对于InnoDB，PostgreSQL的优势似乎主要的只有一条：事务回滚可以立即完成，无论事务进行了多少操作。查询以前的历史数据的功能并不常用，在目前的PostgreSQL中也并不实用。

劣势为：

InnoDB的主要劣势在于事务回滚时需要清理事务所作的所有修改，因此使用InnoDB时要避免使用超大型事务，否则回滚可能超慢无比。

而PostgreSQL的主要劣势在于清理老版本的扫描代价，索引属性更新时引起的索引项频繁插入，堆空间的回收问题以及判断算法的复杂性和开销等。更深入的介绍请参考风清扬博客。