用TCC来解决多个第三方系统数据一致性问题

2024-09-01 22:04

本文主要是介绍用TCC来解决多个第三方系统数据一致性问题,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

对于做集成的公司来说,会集成各种第三方系统,要么是通过第三方系统的api,要么直接集成第三方系统的设备。如果是通过api集成,单次请求只调用一个三方系统没问题,同步调用就行,但如果同时要调用多个三方系统,并且需要三方系统都成功的时候才算该次请求成功调用,这种情况只要后面调用的系统发生报错,前面系统如果不删除产生的数据,就会遗留在三方系统中,产生脏数据。这种集成的三方系统,不是我方能够控制的,我们不能修改他们的代码。

下图是产生该问题的一个场景:
在这里插入图片描述

这里我尝试使用了TCC来处理多个三方系统的数据一致问题,以添加人脸为例来说明:
在这里插入图片描述

  • try阶段依次调用每个三方系统的新增人脸接口,每个三方系统调用成功后,把我方功能主键ID(比如人脸id)、三方返回数据(三方系统人脸id)、操作类型(比如新增),三方系统唯一标识(比如third1)存储到临时记录表里
  • confirm阶段暂时没用
  • cancel阶段,如果try阶段,某一个三方系统报错了,TCC就会执行到该阶段。该阶段要把try阶段已经执行成功的记录查询出来,调用三方系统的删除接口

经过以上步骤以此来完成脏数据的删除。

TCC我们要考虑以下的几种情况:

  1. 新增出错-删除回调:
    try阶段:每个三方系统调用成功后,将我方功能主键ID、三方系统主键、操作类型(ADD)、三方唯一标识(third1、third2)记下里
    在这里插入图片描述
    cancel阶段:根据我方功能主键ID,操作类型(ADD)查询出所有记录,再循环调用三方删除接口

  2. 修改出错-修改回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(UPDATE)
    cancel阶段:根据我方功能主键ID,操作类型(UPDATE),以THIRD字段分组,查询出最新记录,封装参数,循环调用三方更新接口,更新回原来的数据

  3. 删除出错-新增回调:
    try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(DELETE)
    cancel阶段:根据我方功能主键ID,操作类型(DELETE),查询出最新记录,封装参数,循环调用三方新增接口,把删除的数据加回来,随后再更新我方系统映射表中三方主键id

这是使用TCC来解决的多个三方数据一致性问题,这种方案数据查询,参数封装都需要手动写代码处理,比较繁琐,我之前还提供过另外一种方案,通过注解进行声明,由框架解析注解来自动处理,代码量少很多,不过我的代码还有很多要优化完善的地方,但我想这种思想是好的,可以看看https://itsaysay.blog.csdn.net/article/details/126072080

贴出TCC部分的代码看一下,源码可以查看 https://github.com/jujunchen/tcc-third-transaction:

package csdn.itsaysay.we.service.handler;import java.util.List;
import java.util.Objects;import javax.annotation.Resource;import org.mengyun.tcctransaction.api.Compensable;
import org.mengyun.tcctransaction.api.UniqueIdentity;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;import com.baomidou.mybatisplus.core.toolkit.Wrappers;import csdn.itsaysay.we.bean.Third;
import csdn.itsaysay.we.bean.model.FaceDO;
import csdn.itsaysay.we.bean.model.ThirdHistoryDO;
import csdn.itsaysay.we.mapper.ThirdHistoryMapper;
import csdn.itsaysay.we.third.feign.ThirdFeignClient;
import csdn.itsaysay.we.third.third1.T1FaceService;
import csdn.itsaysay.we.third.third2.T2FaceService;
import lombok.extern.slf4j.Slf4j;@Slf4j
@Service
public class FaceAdd {@Resourceprivate T1FaceService third1FaceService;@Resourceprivate T2FaceService third2FaceService;@Resourceprivate ThirdHistoryMapper thirdHistoryMapper;@Resourceprivate ThirdFeignClient thirdFeignClient;@Compensable(confirmMethod = "confirmFaceAdd", cancelMethod = "cancelFaceAdd")@Transactionalpublic void tryFaceAdd(@UniqueIdentity FaceDO face) {log.info("------->we try");//把第三方接口独立成服务,通过feign去调用
//		FaceAddReq req = BeanUtil.copyProperties(face, FaceAddReq.class);
//		thirdFeignClient.faceAdd(req);//直接写在当前服务里面String id1 = third1FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id1, Third.ADD, Third.THIRD1));String id2 = third2FaceService.faceAdd(face);thirdHistoryMapper.insert(buildModel(face.getId(), id2, Third.ADD, Third.THIRD2));}public void confirmFaceAdd(FaceDO face) {log.info("------->we confirm");}public void cancelFaceAdd(FaceDO face) {log.info("------->we cancel");List<ThirdHistoryDO> faceThirdDOs = thirdHistoryMapper.selectList(Wrappers.<ThirdHistoryDO>lambdaQuery().eq(ThirdHistoryDO::getWeData, face.getId()).eq(ThirdHistoryDO::getRtype, Third.ADD));for (ThirdHistoryDO thirdHistoryDO : faceThirdDOs) {//如果只有几个的话,可以单独指定,如果是不确定有几个的话,还要根据third字段唯一标识来获取应该调用哪个第三方if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD1)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD2)) {third1FaceService.faceDelete(thirdHistoryDO.getThirdData());}}}private ThirdHistoryDO buildModel(Integer id, String thirdId, String rtype, String third) {ThirdHistoryDO thirdHistoryDO = new ThirdHistoryDO();thirdHistoryDO.setWeData(String.valueOf(id));thirdHistoryDO.setThirdData(thirdId);thirdHistoryDO.setRtype(rtype);thirdHistoryDO.setThird(third);return thirdHistoryDO;}}

这篇关于用TCC来解决多个第三方系统数据一致性问题的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1128171

相关文章

MybatisGenerator文件生成不出对应文件的问题

《MybatisGenerator文件生成不出对应文件的问题》本文介绍了使用MybatisGenerator生成文件时遇到的问题及解决方法,主要步骤包括检查目标表是否存在、是否能连接到数据库、配置生成... 目录MyBATisGenerator 文件生成不出对应文件先在项目结构里引入“targetProje

C#使用HttpClient进行Post请求出现超时问题的解决及优化

《C#使用HttpClient进行Post请求出现超时问题的解决及优化》最近我的控制台程序发现有时候总是出现请求超时等问题,通常好几分钟最多只有3-4个请求,在使用apipost发现并发10个5分钟也... 目录优化结论单例HttpClient连接池耗尽和并发并发异步最终优化后优化结论我直接上优化结论吧,

Java内存泄漏问题的排查、优化与最佳实践

《Java内存泄漏问题的排查、优化与最佳实践》在Java开发中,内存泄漏是一个常见且令人头疼的问题,内存泄漏指的是程序在运行过程中,已经不再使用的对象没有被及时释放,从而导致内存占用不断增加,最终... 目录引言1. 什么是内存泄漏?常见的内存泄漏情况2. 如何排查 Java 中的内存泄漏?2.1 使用 J

JAVA系统中Spring Boot应用程序的配置文件application.yml使用详解

《JAVA系统中SpringBoot应用程序的配置文件application.yml使用详解》:本文主要介绍JAVA系统中SpringBoot应用程序的配置文件application.yml的... 目录文件路径文件内容解释1. Server 配置2. Spring 配置3. Logging 配置4. Ma

2.1/5.1和7.1声道系统有什么区别? 音频声道的专业知识科普

《2.1/5.1和7.1声道系统有什么区别?音频声道的专业知识科普》当设置环绕声系统时,会遇到2.1、5.1、7.1、7.1.2、9.1等数字,当一遍又一遍地看到它们时,可能想知道它们是什... 想要把智能电视自带的音响升级成专业级的家庭影院系统吗?那么你将面临一个重要的选择——使用 2.1、5.1 还是

Python MySQL如何通过Binlog获取变更记录恢复数据

《PythonMySQL如何通过Binlog获取变更记录恢复数据》本文介绍了如何使用Python和pymysqlreplication库通过MySQL的二进制日志(Binlog)获取数据库的变更记录... 目录python mysql通过Binlog获取变更记录恢复数据1.安装pymysqlreplicat

Linux使用dd命令来复制和转换数据的操作方法

《Linux使用dd命令来复制和转换数据的操作方法》Linux中的dd命令是一个功能强大的数据复制和转换实用程序,它以较低级别运行,通常用于创建可启动的USB驱动器、克隆磁盘和生成随机数据等任务,本文... 目录简介功能和能力语法常用选项示例用法基础用法创建可启动www.chinasem.cn的 USB 驱动

使用SQL语言查询多个Excel表格的操作方法

《使用SQL语言查询多个Excel表格的操作方法》本文介绍了如何使用SQL语言查询多个Excel表格,通过将所有Excel表格放入一个.xlsx文件中,并使用pandas和pandasql库进行读取和... 目录如何用SQL语言查询多个Excel表格如何使用sql查询excel内容1. 简介2. 实现思路3

numpy求解线性代数相关问题

《numpy求解线性代数相关问题》本文主要介绍了numpy求解线性代数相关问题,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧... 在numpy中有numpy.array类型和numpy.mat类型,前者是数组类型,后者是矩阵类型。数组

解决systemctl reload nginx重启Nginx服务报错:Job for nginx.service invalid问题

《解决systemctlreloadnginx重启Nginx服务报错:Jobfornginx.serviceinvalid问题》文章描述了通过`systemctlstatusnginx.se... 目录systemctl reload nginx重启Nginx服务报错:Job for nginx.javas