热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

【博学谷学习记录】超强总结,用心分享。分布式事务

1.分布式事务问题 1.1.本地事务本地事务,也就是传统的单机事务。在传统数据库事务中,必须要满足四个原则:   1.2.分布式事务分布式事务,就是指不是在单个服务

1.分布式事务问题

 


1.1.本地事务

本地事务,也就是传统的单机事务。在传统数据库事务中,必须要满足四个原则:

 

 

 


1.2.分布式事务

分布式事务,就是指不是在单个服务或单个数据库架构下,产生的事务,例如:



  • 跨数据源的分布式事务



  • 跨服务的分布式事务



  • 综合情况



 

在数据库水平拆分、服务垂直拆分之后,一个业务操作通常要跨多个数据库、服务才能完成。例如电商行业中比较常见的下单付款案例,包括下面几个行为:



  • 创建新订单



  • 扣减商品库存



  • 从用户账户余额扣除金额



 

完成上面的操作需要访问三个不同的微服务和三个不同的数据库。

 

 

 

订单的创建、库存的扣减、账户扣款在每一个服务和数据库内是一个本地事务,可以保证ACID原则。

但是当我们把三件事情看做一个"业务",要满足保证“业务”的原子性,要么所有操作全部成功,要么全部失败,不允许出现部分成功部分失败的现象,这就是分布式系统下的事务了。

此时ACID难以满足,这是分布式事务要解决的问题

 


2.理论基础

解决分布式事务问题,需要一些分布式系统的基础知识作为理论指导。


2.1.CAP定理

1998年,加州大学的计算机科学家 Eric Brewer 提出,分布式系统有三个指标。




  • Consistency(一致性)



  • Availability(可用性)



  • Partition tolerance (分区容错性)




 

 

它们的第一个字母分别是 C、A、P。

Eric Brewer 说,这三个指标不可能同时做到。这个结论就叫做 CAP 定理。

 


2.1.1.一致性

Consistency(一致性):用户访问分布式系统中的任意节点,得到的数据必须一致。

比如现在包含两个节点,其中的初始数据是一致的:

 

 

当我们修改其中一个节点的数据时,两者的数据产生了差异:

 

 

要想保住一致性,就必须实现node01 到 node02的数据 同步:

 

 


2.1.2.可用性

Availability (可用性):用户访问集群中的任意健康节点,必须能得到响应,而不是超时或拒绝。

如图,有三个节点的集群,访问任何一个都可以及时得到响应:

 

 

当有部分节点因为网络故障或其它原因无法访问时,代表节点不可用:

 

 


2.1.3.分区容错

Partition(分区):因为网络故障或其它原因导致分布式系统中的部分节点与其它节点失去连接,形成独立分区。

 

 

Tolerance(容错):在集群出现分区时,整个系统也要持续对外提供服务

 


2.1.4.矛盾

在分布式系统中,系统间的网络不能100%保证健康,一定会有故障的时候,而服务有必须对外保证服务。因此Partition Tolerance不可避免。

当节点接收到新的数据变更时,就会出现问题了:

 

 

如果此时要保证一致性,就必须等待网络恢复,完成数据同步后,整个集群才对外提供服务,服务处于阻塞状态,不可用。

如果此时要保证可用性,就不能等待网络恢复,那node01、node02与node03之间就会出现数据不一致。

 

也就是说,在P一定会出现的情况下,A和C之间只能实现一个。

 


2.2.BASE理论

BASE理论是对CAP的一种解决思路,包含三个思想:



  • Basically Available (基本可用):分布式系统在出现故障时,允许损失部分可用性,即保证核心可用。



  • Soft State(软状态):在一定时间内,允许出现中间状态,比如临时的不一致状态。



  • Eventually Consistent(最终一致性):虽然无法保证强一致性,但是在软状态结束后,最终达到数据一致。



 


2.3.解决分布式事务的思路

分布式事务最大的问题是各个子事务的一致性问题,因此可以借鉴CAP定理和BASE理论,有两种解决思路:



  • AP模式:各子事务分别执行和提交,允许出现结果不一致,然后采用弥补措施恢复数据即可,实现最终一致。



  • CP模式:各个子事务执行后互相等待,同时提交,同时回滚,达成强一致。但事务等待过程中,处于弱可用状态。



 

但不管是哪一种模式,都需要在子系统事务之间互相通讯,协调事务状态,也就是需要一个事务协调者(TC)

 

 

 

这里的子系统事务,称为分支事务;有关联的各个分支事务在一起称为全局事务


3.初识Seata

Seata是 2019 年 1 月份蚂蚁金服和阿里巴巴共同开源的分布式事务解决方案。致力于提供高性能和简单易用的分布式事务服务,为用户打造一站式的分布式解决方案。


3.1.Seata的架构

Seata事务管理中有三个重要的角色:



  • TC (Transaction Coordinator) - 事务协调者:维护全局和分支事务的状态,协调全局事务提交或回滚。



  • TM (Transaction Manager) - 事务管理器:定义全局事务的范围、开始全局事务、提交或回滚全局事务。



  • RM (Resource Manager) - 资源管理器:管理分支事务处理的资源,与TC交谈以注册分支事务和报告分支事务的状态,并驱动分支事务提交或回滚。



 

整体的架构如图:

 

 

Seata基于上述架构提供了四种不同的分布式事务解决方案:



  • XA模式:强一致性分阶段事务模式,牺牲了一定的可用性,无业务侵入



  • TCC模式:最终一致的分阶段事务模式,有业务侵入



  • AT模式:最终一致的分阶段事务模式,无业务侵入,也是Seata的默认模式



  • SAGA模式:长事务模式,有业务侵入



无论哪种方案,都离不开TC,也就是事务的协调者。


3.2.微服务集成Seata

我们以order-service为例来演示。


3.2.1.引入依赖

首先,在order-service中引入依赖:



com.alibaba.cloud
spring-cloud-starter-alibaba-seata



seata-spring-boot-starter
io.seata




io.seata
seata-spring-boot-starter

${seata.version}

3.2.2.配置TC地址

在order-service中的application.yml中,配置TC服务信息,通过注册中心nacos,结合服务名称获取TC地址:

seata:
registry: # TC服务注册中心的配置,微服务根据这些信息去注册中心获取tc服务地址
type: nacos # 注册中心类型 nacos
nacos:
server
-addr: 127.0.0.1:8848 # nacos地址
namespace:
"" # namespace,默认为空
group: DEFAULT_GROUP # 分组,默认是DEFAULT_GROUP
application: seata
-tc-server # seata服务名称
username: nacos
password: nacos
tx
-service-group: seata-demo # 事务组名称
service:
vgroup
-mapping: # 事务组与cluster的映射关系
seata
-demo: SH

微服务如何根据这些配置寻找TC的地址呢?

我们知道注册到Nacos中的微服务,确定一个具体实例需要四个信息:



  • namespace:命名空间



  • group:分组



  • application:服务名



  • cluster:集群名



 

以上四个信息,在刚才的yaml文件中都能找到:

 

 

namespace为空,就是默认的public

结合起来,TC服务的信息就是:public@DEFAULT_GROUP@seata-tc-server@SH,这样就能确定TC服务集群了。然后就可以去Nacos拉取对应的实例信息了。

 


4.动手实践

下面我们就一起学习下Seata中的四种不同的事务模式。

 


4.1.XA模式

XA 规范 是 X/Open 组织定义的分布式事务处理(DTP,Distributed Transaction Processing)标准,XA 规范 描述了全局的TM与局部的RM之间的接口,几乎所有主流的数据库都对 XA 规范 提供了支持。

 


4.1.1.两阶段提交

XA是规范,目前主流数据库都实现了这种规范,实现的原理都是基于两阶段提交。

正常情况:

 

 

异常情况:

 

 

一阶段:



  • 事务协调者通知每个事物参与者执行本地事务



  • 本地事务执行完成后报告事务执行状态给事务协调者,此时事务不提交,继续持有数据库锁



二阶段:



  • 事务协调者基于一阶段的报告来判断下一步操作



    • 如果一阶段都成功,则通知所有事务参与者,提交事务



    • 如果一阶段任意一个参与者失败,则通知所有事务参与者回滚事务





 


4.1.2.Seata的XA模型

Seata对原始的XA模式做了简单的封装和改造,以适应自己的事务模型,基本架构如图:

 

 

 

RM一阶段的工作:

① 注册分支事务到TC

② 执行分支业务sql但不提交

③ 报告执行状态到TC

TC二阶段的工作:



  • TC检测各分支事务执行状态

    a.如果都成功,通知所有RM提交事务

    b.如果有失败,通知所有RM回滚事务



RM二阶段的工作:



  • 接收TC指令,提交或回滚事务



 

 


4.1.3.优缺点

XA模式的优点是什么?



  • 事务的强一致性,满足ACID原则。



  • 常用数据库都支持,实现简单,并且没有代码侵入



XA模式的缺点是什么?



  • 因为一阶段需要锁定数据库资源,等待二阶段结束才释放,性能较差



  • 依赖关系型数据库实现事务



 


4.1.4.实现XA模式

Seata的starter已经完成了XA模式的自动装配,实现非常简单,步骤如下:

1)修改application.yml文件(每个参与事务的微服务),开启XA模式:

mOney= 90

6)RM报告本地事务状态给TC

 

二阶段:

1)TM通知TC事务结束

2)TC检查分支事务状态

a)如果都成功,则立即删除快照

b)如果有分支事务失败,需要回滚。读取快照数据({"id": 1, "money": 100}),将快照恢复到数据库。此时数据库再次恢复为100

 

 

流程图:

 

 

 


4.2.3.AT与XA的区别

简述AT模式与XA模式最大的区别是什么?



  • XA模式一阶段不提交事务,锁定资源;AT模式一阶段直接提交,不锁定资源。



  • XA模式依赖数据库机制实现回滚;AT模式利用数据快照实现数据回滚。



  • XA模式强一致;AT模式最终一致



 


4.2.4.脏写问题

在多线程并发访问AT模式的分布式事务时,有可能出现脏写问题,如图:

 

 

 

解决思路就是引入了全局锁的概念。在释放DB锁之前,先拿到全局锁。避免同一时刻有另外一个事务来操作当前数据。

 

 


4.2.5.优缺点

AT模式的优点:



  • 一阶段完成直接提交事务,释放数据库资源,性能比较好



  • 利用全局锁实现读写隔离



  • 没有代码侵入,框架自动完成回滚和提交



AT模式的缺点:



  • 两阶段之间属于软状态,属于最终一致



  • 框架的快照功能会影响性能,但比XA模式要好很多



 


4.2.6.实现AT模式

AT模式中的快照生成、回滚等动作都是由框架自动完成,没有任何代码侵入,因此实现非常简单。

只不过,AT模式需要一个表来记录全局锁、另一张表来记录数据快照undo_log。

 

1)导入数据库表,记录全局锁

2)修改application.yml文件,将事务模式修改为AT模式即可:

cn.itcast.account.service包中新建一个接口,声明TCC三个接口:

package cn.itcast.account.service;
import io.seata.rm.tcc.api.BusinessActionContext;
import io.seata.rm.tcc.api.BusinessActionContextParameter;
import io.seata.rm.tcc.api.LocalTCC;
import io.seata.rm.tcc.api.TwoPhaseBusinessAction;
@LocalTCC
public interface AccountTCCService {
@TwoPhaseBusinessAction(name
= "deduct", commitMethod = "confirm", rollbackMethod = "cancel")
void deduct(@BusinessActionContextParameter(paramName = "userId") String userId,
@BusinessActionContextParameter(paramName
= "money")int money);
boolean confirm(BusinessActionContext ctx);
boolean cancel(BusinessActionContext ctx);
}

 

 


3)编写实现类

在account-service服务中的cn.itcast.account.service.impl包下新建一个类,实现TCC业务:

package cn.itcast.account.service.impl;

import cn.itcast.account.entity.AccountFreeze;
import cn.itcast.account.mapper.AccountFreezeMapper;
import cn.itcast.account.mapper.AccountMapper;
import cn.itcast.account.service.AccountTCCService;
import io.seata.core.context.RootContext;
import io.seata.rm.tcc.api.BusinessActionContext;
import lombok.extern.slf4j.Slf4j;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;

@Service
@Slf4j
public class AccountTCCServiceImpl implements AccountTCCService {

@Autowired
private AccountMapper accountMapper;
@Autowired
private AccountFreezeMapper freezeMapper;

@Override
@Transactional
public void deduct(String userId, int money) {
// 0.获取事务id
String xid = RootContext.getXID();
// 1.扣减可用余额
accountMapper.deduct(userId, money);
// 2.记录冻结金额,事务状态
AccountFreeze freeze = new AccountFreeze();
freeze.setUserId(userId);
freeze.setFreezeMoney(money);
freeze.setState(AccountFreeze.State.TRY);
freeze.setXid(xid);
freezeMapper.insert(freeze);
}

@Override
public boolean confirm(BusinessActionContext ctx) {
// 1.获取事务id
String xid = ctx.getXid();
// 2.根据id删除冻结记录
int count = freezeMapper.deleteById(xid);
return count == 1;
}

@Override
public boolean cancel(BusinessActionContext ctx) {
// 0.查询冻结记录
String xid = ctx.getXid();
AccountFreeze freeze
= freezeMapper.selectById(xid);

// 1.恢复可用余额
accountMapper.refund(freeze.getUserId(), freeze.getFreezeMoney());
// 2.将冻结金额清零,状态改为CANCEL
freeze.setFreezeMoney(0);
freeze.setState(AccountFreeze.State.CANCEL);
int count = freezeMapper.updateById(freeze);
return count == 1;
}
}

 

 

 


4.4.SAGA模式

Saga 模式是 Seata 即将开源的长事务解决方案,将由蚂蚁金服主要贡献。

其理论基础是Hector & Kenneth 在1987年发表的论文Sagas


4.4.1.原理

在 Saga 模式下,分布式事务内有多个参与者,每一个参与者都是一个冲正补偿服务,需要用户根据业务场景实现其正向操作和逆向回滚操作。

分布式事务执行过程中,依次执行各参与者的正向操作,如果所有正向操作均执行成功,那么分布式事务提交。如果任何一个正向操作执行失败,那么分布式事务会去退回去执行前面各参与者的逆向回滚操作,回滚已提交的参与者,使分布式事务回到初始状态。

 

 

Saga也分为两个阶段:



  • 一阶段:直接提交本地事务



  • 二阶段:成功则什么都不做;失败则通过编写补偿业务来回滚



 


4.4.2.优缺点

 

优点:



  • 事务参与者可以基于事件驱动实现异步调用,吞吐高



  • 一阶段直接提交事务,无锁,性能好



  • 不用编写TCC中的三个阶段,实现简单



缺点:



  • 软状态持续时间不确定,时效性差



  • 没有锁,没有事务隔离,会有脏写




4.5.四种模式对比

我们从以下几个方面来对比四种实现:



  • 一致性:能否保证事务的一致性?强一致还是最终一致?



  • 隔离性:事务之间的隔离性如何?



  • 代码侵入:是否需要对业务代码改造?



  • 性能:有无性能损耗?



  • 场景:常见的业务场景



 

如图:

 

 

 

微服务基于事务组(tx-service-group)与TC集群的映射关系,来查找当前应该使用哪个TC集群。当SH集群故障时,只需要将vgroup-mapping中的映射关系改成HZ。则所有微服务就会切换到HZ的TC集群了。


5.高可用

Seata的TC服务作为分布式事务核心,一定要保证集群的高可用性。


5.1.高可用架构模型

搭建TC服务集群非常简单,启动多个TC服务,注册到nacos即可。

 

但集群并不能确保100%安全,万一集群所在机房故障怎么办?所以如果要求较高,一般都会做异地多机房容灾。

 

比如一个TC集群在上海,另一个TC集群在杭州:

 

 

 

微服务基于事务组(tx-service-group)与TC集群的映射关系,来查找当前应该使用哪个TC集群。当SH集群故障时,只需要将vgroup-mapping中的映射关系改成HZ。则所有微服务就会切换到HZ的TC集群了。

 


 

 



推荐阅读
author-avatar
萧鸿锵_976
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有