mysql中的事务隔离级别及可重复读读提交详细分析(mvcc多版本控制/undo log)

<font color=red>一.事物隔离级别</font>

  • 读未提交(read uncommitted)是指,一个事务还没提交时,它作的变动就能被别的事务看到.通俗理解,别人改数据的事务还没有提交,我在个人事务中也能读到。
  • 读提交(read committed)是指,一个事务提交以后,它作的变动才会被其余事务看到。通俗理解,别人改数据的事务已经提交,我在个人事务中才能读到。
  • 可重复读(repeatable read)是指,一个事务执行过程当中看到的数据,老是跟这个事务在启动时看到的数据 是一致的。固然在可重复读隔离级别下,未提交变动对其余事务也是不可见的。通俗理解,别人改数据的事务已经提交,我在个人事务中也不去读。
  • 串行化(serializable ),顾名思义是对于同一行记录,“写”会加“写锁”,“读”会加“读锁”。当出现读写锁冲突的时候,后访问的事务必须等前一个事务执行完成,才能继续执行。通俗理解,个人事务还没有提交,别人就别想改数据。

图片示例讲解

  • 若隔离级别是“读未提交”, 则 V1 的值就是 2。这时候事务 B 虽然尚未提交,可是 结果已经被 A 看到了。所以,V二、V3 也都是 2。
  • 若隔离级别是“读提交”,则 V1 是 1,V2 的值是 2。事务 B 的更新在提交后才能被 A 看到。因此, V3 的值也是 2。
  • 若隔离级别是“可重复读”,则 V一、V2 是 1,V3 是 2。之因此 V2 仍是 1,遵循的就 是这个要求:事务在执行期间看到的数据先后必须是一致的。
  • 若隔离级别是“串行化”,则在事务 B 执行“将 1 改为 2”的时候,会被锁住。直到事 务 A 提交后,事务 B 才能够继续执行。因此从 A 的角度看, V一、V2 值是 1,V3 的值 是 2。
在实现上,数据库里面会建立一个视图,访问的时候以视图的逻辑结果为准。在“可重复 读”隔离级别下,这个视图是在事务启动时建立的,整个事务存在期间都用这个视图。 在“读提交”隔离级别下,这个视图是在每一个 SQL 语句开始执行的时候建立的。这里须要 注意的是,“读未提交”隔离级别下直接返回记录上的最新值,没有视图概念;而“串行 化”隔离级别下直接用加锁的方式来避免并行访问。

<font color=red>二.查看mysql的隔离级别</font>

  • mysql> show variables like 'transaction_isolation';
  • mysql默认级别: repeatable read

<font color=red>三.事务隔离的实现</font>

  • 每条记录在更新的时候都会同时记录一条回滚操做(也就是说redo log会记录,undo log也会同时记录).mysql

  • 记录上的最新值,经过回滚操做,均可以获得前一个状态的值。sql

  • 回滚日志删除问题.数据库

    在不须要的时候才删除。也就是说,系统会判断,当没有事务再须要用到这些回滚日志时,回滚日志会被删除。
    何时才不须要了呢?就是当系统里没有比这个回滚日志更早的 read-view 的时候。
  • 回滚日志存储位置数组

    在 MySQL 5.5 及之前的版本,回滚日志是跟数据字典一块儿放在 ibdata 文件里的(系统表空间),即便长 事务最终提交,回滚段被清理,文件也不会变小。我见过数据只有 20GB,而回滚段有 200GB 的库。最终只好为了清理回滚段,重建整个库。
  • 回滚流程session

<font color=red>四.尽可能不要使用长事务</font>

  • 长事务意味着系统里面会存在很老的事务视图。因为这些事务随时可能访问数据库里面的任何数据,因此这个事务提交以前,数据库里面它可能用到的回滚记录都必须保留,这就会致使大量占用存储空间。spa

  • 还占用锁资源,也可能拖垮整个库线程

  • 详解日志

    好比,在某个时刻(今天上午9:00)开启了一个事务A(对于可重复读隔离级别,此时一个视图read-view A也建立了),这是一个很长的事务……
    
    事务A在今天上午9:20的时候,查询了一个记录R1的一个字段f1的值为1……
    
    今天上午9:25的时候,一个事务B(随之而来的read-view B)也被开启了,它更新了R1.f1的值为2(同时也建立了一个由2到1的回滚日志),这是一个短事务,事务随后就被commit了。
    
    今天上午9:30的时候,一个事务C(随之而来的read-view C)也被开启了,它更新了R1.f1的值为3(同时也建立了一个由3到2的回滚日志),这是一个短事务,事务随后就被commit了。
    
    ……
    
    到了下午3:00了,长事务A尚未commit,为了保证事务在执行期间看到的数据在先后必须是一致的,那些老的事务视图、回滚日志就必须存在了(read-view B,read-view C),这就占用了大量的存储空间。
    
    源于此,咱们应该尽可能不要使用长事务。

在information_schema 库的 innodb_trx 这个表中查询长事务

select * from information_schema.innodb_trx where TIME_TO_SEC(timediff(now(),trx_started))>60code

<font color=red>五.事务的启动方式</font>

  • 显式启动事务语句orm

    begin 或 start transaction。
    配套的提交语句是 commit,
    回滚语句是 rollback。
  • set autocommit=0,会将线程的自动提交关掉.

    意味着若是你只执行一个 select 语句,这个事务就启动了,并且并不会自动提交。这个事务持续存在直到你主 动执行 commit 或 rollback 语句,或者断开链接。
  • select也是事物

<font color=red>六.可重复读隔离级详细分析</font>

可重复读隔离级别下的更新和读取

mysql> CREATE TABLE `t` (
  `id` int(11) NOT NULL, 
  `k` int(11) DEFAULT NULL, 
  PRIMARY KEY (`id`)
) ENGINE=InnoDB;
insert into t(id, k) values(1,1),(2,2);

注意的是事务的启动时机。

在可重复读RR隔离级别模式下,begin/start transaction 命令并非一个事务的起点,在执行到它们以后的第一个操做 InnoDB 表的语句,事务才真正启动。若是你想要立刻启动一个事务,可使用 start transaction with consistent snapshot 这个命令。

  • 第一种启动方式,begin/start transaction一致性视图是在第执行第一个快照读语句时建立的;
  • 第二种启动方式,start transaction with consistent snapshot一致性视图是在执行 start transaction with consistent snapshot 时建立的。

上面图1执行的结果是:

  • sessionB查询到的k值为3
  • sessionA查询到的k值为1
  • 执行顺序是,先执行sessionC更新,在执行sessionB更新和查询,再执行sessionA的查询
  • 获得上面的执行结果的缘由是什么呢,下面分析.

mysql中两个视图概念

  • view。它是一个用查询语句定义的虚拟表,在调用的时候执行查询语句并生成结 果。建立视图的语法是 create view ... ,而它的查询方法与表同样。
  • InnoDB 在实现 MVCC 时用到的一致性读视图,即 consistent read view, 用于支持 RC(Read Committed,读提交)和 RR(Repeatable Read,可重复读)隔 离级别的实现。它没有物理结构,做用是事务执行期间用来定义“我能看到什么数据”。

快照在MVCC里是怎么工做的?

  • 在可重复读隔离级别下,事务在启动的时候就“拍了个快照”。注意,这个快照是基于整库的。

  • InnoDB 里面每一个事务有一个惟一的事务 ID,叫做 transaction id。它是在事务开始的时候向 InnoDB 的事务系统申请的,是按申请顺序严格递增的。

  • 每行数据也都是有多个版本的,涉及到transaction id

    • 每次事务更新数据的时候,都会生成一个新的数据版本,而且把 transaction id 赋值给这个数据版本的事务 ID,记为 row trx_id

    • 同时,旧的数据版本要保留,而且在新的数据版本中,可以有信息能够直接拿到它。

    • 也就是说,数据表中的一行记录,其实可能有多个版本 (row),每一个版本有本身的 row trx_id。

    • 图中虚线框里是同一行数据的 4 个版本,当前最新版本是 V4,k 的值是 22,它是被transaction id 为 25 的事务更新的,所以它的 row trx_id 也是 25。

    • 前面的文章不是说,语句更新会生成 undo log(回滚日志)吗?那么,<font color=red>undo log 在哪呢?</font>

    • 实际上,<font color=red>图 2 中的三个虚线箭头,就是 undo log</font>;而 V一、V二、V3 并非物理上真实存 在的,而是每次须要的时候根据当前版本和 undo log 计算出来的。好比,须要 V2 的时 候,就是经过 V4 依次执行 U三、U2 算出来。

  • 按照可重复读的定义,一个事务启动的时候,可以看到全部已经提交的事务结果。可是以后,这个事务执行期间,其余事务的更新对它不可见。

  • 一个事务只须要在启动的时候声明说,“以我启动的时刻为准,若是一个数据版本是在我启动以前生成的,就认;若是是我启动之后才生成的,我就不认,我必需要找到它的上一个版本”。 固然,若是“上一个版本”也不可见,那就得继续往前找。还有,若是是这个事务本身更 新的数据,它本身仍是要认的。

  • 在实现上, InnoDB 为每一个事务构造了一个数组,用来保存这个事务启动瞬间,当前正 在“活跃”的全部事务 ID。“活跃”指的就是,启动了但还没提交。数组里面事务 ID 的最小值记为低水位,当前系统里面已经建立过的事务 ID 的最大值加 1 记为高水位。这个视图数组和高水位,就组成了当前事务的一致性视图(read-view)。

  • 当开启事务时,须要保存活跃事务的数组(A),而后获取高水位(B)二者中间会不会产生新的事务?

    • A和B之间在事务系统的锁保护下作的,能够认为是原子操做,期间不能建立事务。
    • 高水位不在视图数组里面,高水位应该就是属于将来未开始事务了
    • 事务A启动时,当前活跃事务数组包不包括本身的trx_id,由于若是是本身更新的,老是可见的
  • <font color=red>数据版本的可见性规则,就是基于数据的 row trx_id 和这个一致性视图的对比结果获得 的。这个视图数组把全部的 row trx_id 分红了几种不一样的状况。</font>

    • 对于当前事务的启动瞬间来讲,假设当前trx id为98 , 在当前事务开始后,计算活跃事务以前又产生了个新事务trx id为99没有commit,假设活跃事务的id组成的数据为下面的数组[80,88,99],此时事务80/88/99为活跃事务,99为当前系统中事务最大ID, 高水位100是当前系统最大事务id99加1计算出来的,则会有如下几种可能:

      1. 若是落在绿色部分,表示这个版本是已提交的事务或者是当前事务本身生成的,这个数据是可见的; 即80之前的事务均可见

      2. 若是落在红色部分,表示这个版本是由未来启动的事务生成的,是确定不可见的; 100及100之后的事务都不可见

      3. 若是落在黄色部分,那就包括两种状况

        a. 若 row trx_id 在数组中,表示这个版本是由还没提交的事务生成的,不可见; 80/88/99为活跃事务,不可见

        b. 若 row trx_id 不在数组中,表示这个版本是已经提交了的事务生成的,可见。80~99中间,去除80/88/99,好比81等其他的是可见的.

  • InnoDB 利用了“全部数据都有多个版本”的这个特性,利用数据可见性规则实现了“秒级建立快照”的能力。

  • 为何会出现sessionB查询到的k值为3,sessionA查询到的k值为1呢,根据上面的数据可见性分析以下:

    • 这里,咱们不妨作以下假设:

      1. 事务 A 开始前,系统里面只有一个活跃事务 ID 是 99;
      2. 事务 A、B、C 的版本号分别是 100、10一、102,且当前系统里只有这四个事务;
      3. 三个事务开始前,(1,1)这一行数据的 row trx_id 是 90。
    • 事务 A 的视图数组就是 [99,100], 事务 B 的视图数组是 [99,100,101], 事务 C 的视 图数组是 [99,100,101,102]。

      从图中能够看到,第一个有效更新是事务 C,把数据从 (1,1) 改为了 (1,2)。这时候,这个数据的最新版本的 row trx_id 是 102,而 90 这个版本已经成为了历史版本。
      
      第二个有效更新是事务 B,把数据从 (1,2) 改为了 (1,3)。这时候,这个数据的最新版本 (即 row trx_id)是 101,而 102 又成为了历史版本。{备注:按理说事务B是[99,100,101],此时找到(1,2)的时候判断出row trx_id=102,比它本身的高水位大,处于红色区域,不可见,应该往前找,找(1,1)版本,可是此时它倒是找的(1,2)row trx_id=102的版本,这是什么缘由的,是由于更新都是“当前读”(current read),当前读这个概念下面解释}
      
      你可能注意到了,在事务 A 查询的时候,其实事务 B 尚未提交,可是它生成的 (1,3) 这 个版本已经变成当前版本了。但这个版本对事务 A 必须是不可见的,不然就变成脏读了。
      
      好,如今事务 A 要来读数据了,它的视图数组是 [99,100]。固然了,读数据都是从当前版本读起的。因此,事务 A 查询语句的读数据流程是这样的:
      		找到 (1,3) 的时候,判断出 row trx_id=101,比高水位大,处于红色区域,不可见;
      		接着,找到上一个历史版本,一看 row trx_id=102,比高水位大,处于红色区域,不可见;
      		再往前找,终于找到了(1,1),它的 row trx_id=90,比低水位小,处于绿色区域,可见。
      
      这样执行下来,虽然期间这一行数据被修改过,可是事务 A 不论在何时查询,看到这 行数据的结果都是一致的,因此咱们称之为一致性读。
  • 上面的分析判断规则是从代码逻辑直接转译过来的,一个数据版本,对于一个事务视图来讲,除了本身的更新老是可见之外,有三种状况:

    1. 版本未提交,不可见;
    2. 版本已提交,可是是在视图建立后提交的,不可见;
    3. 版本已提交,并且是在视图建立前提交的,可见。

更新逻辑

<font color=red>事务 B 的 update 语句,若是按照一致性读,好像结果不对 哦?事务 B 的视图数组是先生成的,以后事务 C 才提交,不是应该看不见 (1,2) 吗,怎么能算出 (1,3) 来?</font>

  • 是的,若是事务 B 在更新以前查询一次数据,这个查询返回的 k 的值确实是 1。
  • 可是,当它要去更新数据的时候,就不能再在历史版本上更新了,不然事务 C 的更新就丢 失了。所以,事务 B 此时的 set k=k+1 是在(1,2)的基础上进行的操做。
  • 这里就用到了这样一条规则: <font color=red>更新数据都是先读后写的,而这个读,只能读当前的 值,称为“当前读”(current read)。</font>
  • 所以,在更新的时候,当前读拿到的数据是 (1,2),更新后生成了新版本的数据 (1,3),这 个新版本的 row trx_id 是 101。
  • 因此,在执行事务 B 查询语句的时候,一看本身的版本号是 101,最新数据的版本号也是 101,是本身的更新,能够直接使用,因此查询获得的 k 的值是 3。
  • 除了 update 语句外,select 语句若是加 锁,也是当前读。
    • mysql> select k from t where id=1 lock in share mode; 读锁(S 锁,共享锁)
    • mysql> select k from t where id=1 for update; 写锁(X 锁,排他锁)

<font color=red>假设事务 C 不是立刻提交的,而是变成了下面的事务 C’</font>

事务 C’的不一样是,更新后并无立刻提交,在它提交前,事务 B 的更新语句先发起了。前面说过了,虽然事务 C’还没提交,可是 (1,2) 这个版本也已经生成了,而且是当前的 最新版本。那么,事务 B 的更新语句会怎么处理呢?

  • 上一篇文章中提到的“两阶段锁协议”就要上场了
  • 事务 C’ 没提交,也 就是说 (1,2) 这个版本上的写锁还没释放。而事务 B 是<font color=red>当前读</font>,必需要读最新版本,并且 必须加锁,所以就被锁住了,必须等到事务 C’释放这个锁,才能继续它的当前读。
  • 这样一致性读、当前读和行锁就串起来了.<font color=red>在一致性读的环境下,事务C' 执行更新,此时C'没有commit,事务B就开启了,由于事务B要进行当前读,获取最新的信息,读的时候要加锁(读完立马更新),可是此时事务C'尚未commit,锁(行锁)还没释放,因此事务B须要等待事务C'释放锁以后才能获取锁,而后才能执行当前读,读到事务B更新了的(1,2),既而更新为(1,3),同时由于(1,3)是事务B自身更新的,因此事务B在查询id=1的值时,天然而然的就查到了k为3. 可是对于事务A来讲,查询的时候,由于事务C'和事务B的更新都是在事务A开始以后,因此对于事务A都不可见,因此事务A读取到的值为1. 上面的分析一样适用于事务A/B/C</font>

可重复读隔离级别RR核心

  • 核心就是一致性读(consistent read),正式由于一致性读的缘由,因此本事务开始以后,就算其余事务更新了相关的值,此时本事务仍是能查到本事务开始以前的值,而不是其余事务更新后的值.
  • 读提交的逻辑和可重复读的逻辑相似,它们最主要的区别是
    • 在可重复读隔离级别下,只须要在事务开始的时候建立一致性视图,以后事务里的其余查询都共用这个一致性视图;
    • 在读提交隔离级别下,每个语句执行前都会从新算出一个新的视图。

读提交RC隔离级别

<font color=red>start transaction with consistent snapshot; 在都提交下与start transaction等效.</font>

  • 事务 A 的查询语句的视图数组是在执行这个语句的时候建立的,时序上 (1,2)、(1,3) 的生成时间都在建立这个视图数组的时刻以前。
  • 可是(1,3) 还没提交,属于状况 1,不可见; (1,2) 提交了,属于状况 3,可见。
  • 因此,这时候事务 A 查询语句返回的是 k=2。
  • 显然地,事务 B 查询结果 k=3。

站在巨人的肩膀上摘苹果:

https://time.geekbang.org/column/intro/100020801

相关文章
相关标签/搜索