• 分布式事务


    1、什么是分布式事务

    分布式事务就是指事务的资源分别位于不同的分布式系统的不同节点之上的事务;

    2、分布式事务产生的原因

    • 2.1、数据库分库分表

    在单库单表场景下,当业务数据量达到单库单表的极限时,就需要考虑分库分表,将之前的单库单表拆分成多库多表;
    分库分表之后,原来在单个数据库上的事务操作,可能就变成跨多个数据库的操作,此时就需要使用分布式事务;

    • 2.2、业务服务化

    业务服务化即业务按照面向服务(SOA)的架构拆分整个网站系统;
    比如互联网金融网站SOA拆分,分离出交易系统、账务系统、清算系统等,交易系统负责交易管理和记录交易明细,账务系统负责维护用户余额,所有的业务操作都以服务的方式对外发布;
    一笔金融交易操作需要同时记录交易明细和完成用户余额的转账,此时需要分别调用交易系统的交易明细服务和账务系统的用户余额服务,这种跨应用、跨服务的操作需要使用分布式事务才能保证金融数据的一致性;

    3、分布式事务原理简介

    数据库本地事务(ACID)
    说到数据库事务就不得不说,数据库事务中的四大特性 ACID:

    A:原子性(Atomicity),一个事务(transaction)中的所有操作,要么全部完成,要么全部不完成,不会结束在中间某个环节。
    事务在执行过程中发生错误,会被回滚(Rollback)到事务开始前的状态,就像这个事务从来没有执行过一样。
    就像你买东西要么交钱收货一起都执行,要么发不出货,就退钱。
    C:一致性(Consistency),事务的一致性指的是在一个事务执行之前和执行之后数据库都必须处于一致性状态。
    如果事务成功地完成,那么系统中所有变化将正确地应用,系统处于有效状态。
    如果在事务中出现错误,那么系统中的所有变化将自动地回滚,系统返回到原始状态。
    I:隔离性(Isolation),指的是在并发环境中,当不同的事务同时操纵相同的数据时,每个事务都有各自的完整数据空间。
    由并发事务所做的修改必须与任何其他并发事务所做的修改隔离。事务查看数据更新时,数据所处的状态要么是另一事务修改它之前的状态,要么是另一事务修改它之后的状态,事务不会查看到中间状态的数据。
    打个比方,你买东西这个事情,是不影响其他人的。
    D:持久性(Durability),指的是只要事务成功结束,它对数据库所做的更新就必须保存下来。
    即使发生系统崩溃,重新启动数据库系统后,数据库还能恢复到事务成功结束时的状态。
    打个比方,你买东西的时候需要记录在账本上,即使老板忘记了那也有据可查。

    分布式事务的基础

    从上面来看分布式事务是随着互联网高速发展应运而生的,这是一个必然。
    我们之前说过数据库的 ACID 四大特性,已经无法满足我们分布式事务,这个时候又有一些新的大佬提出一些新的理论。

    CAP 理论

    在分布式系统中,一致性(Consistency)、可用性(Availability)和分区容忍性(Partition Tolerance)3 个要素最多只能同时满足两个,不可兼得。其中,分区容忍性又是不可或缺的。

    img

    一致性:分布式环境下,多个节点的数据是否强一致。
    可用性:分布式服务能一直保证可用状态。当用户发出一个请求后,服务能在有限时间内返回结果。
    分区容忍性:特指对网络分区的容忍性。
    举例:Cassandra、Dynamo 等,默认优先选择 AP,弱化 C;HBase、MongoDB 等,默认优先选择 CP,弱化 A。

    BASE 理论
    核心思想:

    基本可用(Basically Available):指分布式系统在出现故障时,允许损失部分的可用性来保证核心可用;
    软状态(Soft state):指允许分布式系统存在中间状态,该中间状态不会影响到系统的整体可用性;
    最终一致性(Eventual consistency):指分布式系统中的所有副本数据经过一定时间后,最终能够达到一致的状态;
    原子性(A)与持久性(D)必须根本保障;
    为了可用性、性能与降级服务的需要,只有降低一致性( C ) 与 隔离性( I ) 的要求;
    酸碱平衡(ACID-BASE Balance);
    BASE 是对 CAP 中 AP 的一个扩展

    一致性模型
    数据的一致性模型可以分成以下三类:

    强一致性:数据更新成功后,任意时刻所有副本中的数据都是一致的,一般采用同步的方式实现。
    弱一致性:数据更新成功后,系统不承诺立即可以读到最新写入的值,也不承诺具体多久之后可以读到。
    最终一致性:弱一致性的一种形式,数据更新成功后,系统不承诺立即可以返回最新写入的值,但是保证最终会返回上一次更新操作的值。
    分布式系统数据的强一致性、弱一致性和最终一致性可以通过 Quorum NRW 算法分析。

    常见的分布式事务解决方案

    • 基于XA协议的两阶段提交

    XA是一个分布式事务协议,由Tuxedo提出。XA中大致分为两部分:事务管理器和本地资源管理器。其中本地资源管理器往往由数据库实现,比如Oracle、DB2这些商业数据库都实现了XA接口,而事务管理器作为全局的调度者,负责各个本地资源的提交和回滚。XA实现分布式事务的原理如下:

    总的来说,XA协议比较简单,而且一旦商业数据库实现了XA协议,使用分布式事务的成本也比较低。但是,XA也有致命的缺点,那就是性能不理想,特别是在交易下单链路,往往并发量很高,XA无法满足高并发场景。XA目前在商业数据库支持的比较理想,在mysql数据库中支持的不太理想,mysql的XA实现,没有记录prepare阶段日志,主备切换回导致主库与备库数据不一致。许多nosql也没有支持XA,这让XA的应用场景变得非常狭隘。

    • 消息事务+最终一致性

    所谓的消息事务就是基于消息中间件的两阶段提交,本质上是对消息中间件的一种特殊利用,它是将本地事务和发消息放在了一个分布式事务里,保证要么本地操作成功成功并且对外发消息成功,要么两者都失败,开源的RocketMQ就支持这一特性,具体原理如下:

    1、A系统向消息中间件发送一条预备消息
    2、消息中间件保存预备消息并返回成功
    3、A执行本地事务
    4、A发送提交消息给消息中间件
    通过以上4步完成了一个消息事务。对于以上的4个步骤,每个步骤都可能产生错误,下面一一分析:

    步骤一出错,则整个事务失败,不会执行A的本地操作步骤二出错,则整个事务失败,不会执行A的本地操作步骤三出错,这时候需要回滚预备消息,怎么回滚?答案是A系统实现一个消息中间件的回调接口,消息中间件会去不断执行回调接口,检查A事务执行是否执行成功,如果失败则回滚预备消息步骤四出错,这时候A的本地事务是成功的,那么消息中间件要回滚A吗?答案是不需要,其实通过回调接口,消息中间件能够检查到A执行成功了,这时候其实不需要A发提交消息了,消息中间件可以自己对消息进行提交,从而完成整个消息事务基于消息中间件的两阶段提交往往用在高并发场景下,将一个分布式事务拆成一个消息事务(A系统的本地操作+发消息)+B系统的本地操作,其中B系统的操作由消息驱动,只要消息事务成功,那么A操作一定成功,消息也一定发出来了,这时候B会收到消息去执行本地操作,如果本地操作失败,消息会重投,直到B操作成功,这样就变相地实现了A与B的分布式事务。原理如下:

    虽然上面的方案能够完成A和B的操作,但是A和B并不是严格一致的,而是最终一致的,我们在这里牺牲了一致性,换来了性能的大幅度提升。当然,这种玩法也是有风险的,如果B一直执行不成功,那么一致性会被破坏,具体要不要玩,还是得看业务能够承担多少风险。

    • TCC (Try-Confirm-Cancel)补偿模式(最终一致性)

    TCC 其实就是采用的补偿机制,其核心思想是:针对每个操作,都要注册一个与其对应的确认和补偿(撤销)操作。

    它分为三个阶段:

    Try 阶段主要是对业务系统做检测及资源预留
    Confirm 阶段主要是对业务系统做确认提交,Try阶段执行成功并开始执行 Confirm阶段时,默认 Confirm阶段是不会出错的。即:只要Try成功,Confirm一定成功。
    Cancel 阶段主要是在业务执行错误,需要回滚的状态下执行的业务取消,预留资源释放。

    举例(Bob 要向 Smith 转账):

    首先在 Try 阶段,要先调用远程接口把 Smith 和 Bob 的钱给冻结起来。
    在 Confirm 阶段,执行远程调用的转账的操作,转账成功进行解冻。
    如果第2步执行成功,那么转账成功,如果第二步执行失败,则调用远程冻结接口对应的解冻方法 (Cancel)。

    优点:

    跟2PC比起来,实现以及流程相对简单了一些,但数据的一致性比2PC也要差一些

    缺点:

    缺点还是比较明显的,在2,3步中都有可能失败。TCC属于应用层的一种补偿方式,所以需要程序员在实现的时候多写很多补偿的代码,在一些场景中,一些业务流程可能用TCC不太好定义及处理。

    最大努力通知:

    业务发起方将协调服务的消息发送到MQ,下游服务接收此消息,如果处理失败,将进行重试,重试N次后依然失败,将不进行重试,放弃处理,这个应用场景要求对事物性要求不高的地方。

    总结:

    单数据库事务完全遵循ACID规范,属于刚性事务,分布式事务要完全遵循ACID规范比较困难, 分布式事务属于柔性事务,满足BASE理论;

    BASE描述: BA(Basic Availability 基本业务可用性)、S(Soft state 柔性状态)、E(Eventual consistency 最终一致性);

    柔性事务对ACID的支持:

    1、原子性:
    严格遵循;
    2、一致性:
    事务完成后的一致性严格遵循,事务中的一致性可适当放宽;
    3、隔离性:
    并行事务间不可影响;事务中间结果可见性允许安全放宽;
    4、持久性:
    严格遵循;
    为了可用性、性能的需要,柔性事务降低了一致性(C)与隔离性(I) 的要求,即“基本可用,最终一致”;

    柔性事务的分类

    柔性事务分为:两阶段型、补偿型、异步确保型、最大努力通知型;
    1、两阶段型
    就是分布式事务两阶段提交,对应技术上的XA、JTA/JTS,这是分布式环境下事务处理的典型模式。
    2、补偿型
    TCC型事务(Try/Confirm/Cancel)可以归为补偿型;TCC思路是:尽早释放锁;在Try成功的情况下,如果事务要回滚,Cancel将作为一个补偿机制,回滚Try操作;
    TCC各操作事务本地化,且尽早提交 (放弃两阶段约束);当全局事务要求回滚时,通过另一个本地事务实现“补偿”行为;
    TCC是将资源层的两阶段提交协议转换到业务层,成为业务模型中的一部分;
    3、异步确保型
    将一些同步阻塞的事务操作变为异步的操作,避免对数据库事务的争用;比如消息事务机制;
    4、最大努力通知型
    通过通知服务器(消息通知)进行,允许失败,有补充机制;

  • 相关阅读:
    9.10 作业
    Day 03 作业
    Day02作业
    Day09 函数
    day08 简单习题
    Day04 python数据类型和词云的生成
    JAVA: 子类通过static块“覆盖”父类的成员变量风险
    JAVA: 子类“覆盖”父类的成员变量
    Java 访问控制权限
    Java数组类型转为集合类型
  • 原文地址:https://www.cnblogs.com/snail-gao/p/11768458.html
Copyright © 2020-2023  润新知