前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
工具
TVP
发布
社区首页 >专栏 >用TCC来解决多个第三方系统数据一致性问题

用TCC来解决多个第三方系统数据一致性问题

作者头像
阿提说说
发布2024-09-06 12:07:46
1030
发布2024-09-06 12:07:46
举报
文章被收录于专栏:Java技术进阶

对于做集成的公司来说,会集成各种第三方系统,要么是通过第三方系统的api,要么直接集成第三方系统的设备。如果是通过api集成,单次请求只调用一个三方系统没问题,同步调用就行,但如果同时要调用多个三方系统,并且需要三方系统都成功的时候才算该次请求成功调用,这种情况只要后面调用的系统发生报错,前面系统如果不删除产生的数据,就会遗留在三方系统中,产生脏数据。这种集成的三方系统,不是我方能够控制的,我们不能修改他们的代码。

下图是产生该问题的一个场景:

这里我尝试使用了TCC来处理多个三方系统的数据一致问题,以添加人脸为例来说明:

  • try阶段依次调用每个三方系统的新增人脸接口,每个三方系统调用成功后,把我方功能主键ID(比如人脸id)、三方返回数据(三方系统人脸id)、操作类型(比如新增),三方系统唯一标识(比如third1)存储到临时记录表里
  • confirm阶段暂时没用
  • cancel阶段,如果try阶段,某一个三方系统报错了,TCC就会执行到该阶段。该阶段要把try阶段已经执行成功的记录查询出来,调用三方系统的删除接口

经过以上步骤以此来完成脏数据的删除。

TCC我们要考虑以下的几种情况:

  1. 新增出错-删除回调: try阶段:每个三方系统调用成功后,将我方功能主键ID、三方系统主键、操作类型(ADD)、三方唯一标识(third1、third2)记下里

cancel阶段:根据我方功能主键ID,操作类型(ADD)查询出所有记录,再循环调用三方删除接口

  1. 修改出错-修改回调: try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(UPDATE) cancel阶段:根据我方功能主键ID,操作类型(UPDATE),以THIRD字段分组,查询出最新记录,封装参数,循环调用三方更新接口,更新回原来的数据
  2. 删除出错-新增回调: try阶段:先从我方系统的映射表中查询出对应的三方系统主键,随后根据三方系统主键调用三方系统查询详情接口,存储到记录表,操作类型(DELETE) cancel阶段:根据我方功能主键ID,操作类型(DELETE),查询出最新记录,封装参数,循环调用三方新增接口,把删除的数据加回来,随后再更新我方系统映射表中三方主键id

这是使用TCC来解决的多个三方数据一致性问题,这种方案数据查询,参数封装都需要手动写代码处理,比较繁琐,我之前还提供过另外一种方案,通过注解进行声明,由框架解析注解来自动处理,代码量少很多,不过我的代码还有很多要优化完善的地方,但我想这种思想是好的,可以看看https://cloud.tencent.com/developer/article/2184996

贴出TCC部分的代码看一下,源码可以查看 https://github.com/jujunchen/tcc-third-transaction

代码语言:javascript
复制
package csdn.itsaysay.we.service.handler;

import java.util.List;
import java.util.Objects;

import javax.annotation.Resource;

import org.mengyun.tcctransaction.api.Compensable;
import org.mengyun.tcctransaction.api.UniqueIdentity;
import org.springframework.stereotype.Service;
import org.springframework.transaction.annotation.Transactional;

import com.baomidou.mybatisplus.core.toolkit.Wrappers;

import csdn.itsaysay.we.bean.Third;
import csdn.itsaysay.we.bean.model.FaceDO;
import csdn.itsaysay.we.bean.model.ThirdHistoryDO;
import csdn.itsaysay.we.mapper.ThirdHistoryMapper;
import csdn.itsaysay.we.third.feign.ThirdFeignClient;
import csdn.itsaysay.we.third.third1.T1FaceService;
import csdn.itsaysay.we.third.third2.T2FaceService;
import lombok.extern.slf4j.Slf4j;

@Slf4j
@Service
public class FaceAdd {
	
	@Resource
	private T1FaceService third1FaceService;
	@Resource
	private T2FaceService third2FaceService;
	@Resource
	private ThirdHistoryMapper thirdHistoryMapper;
	@Resource
	private ThirdFeignClient thirdFeignClient;
	
	
	@Compensable(confirmMethod = "confirmFaceAdd", cancelMethod = "cancelFaceAdd")
	@Transactional
	public void tryFaceAdd(@UniqueIdentity FaceDO face) {
		log.info("------->we try");
		
		//把第三方接口独立成服务,通过feign去调用
//		FaceAddReq req = BeanUtil.copyProperties(face, FaceAddReq.class);
//		thirdFeignClient.faceAdd(req);
		
		//直接写在当前服务里面
		String id1 = third1FaceService.faceAdd(face);
		thirdHistoryMapper.insert(buildModel(face.getId(), id1, Third.ADD, Third.THIRD1));
		
		String id2 = third2FaceService.faceAdd(face);
		thirdHistoryMapper.insert(buildModel(face.getId(), id2, Third.ADD, Third.THIRD2));
	}
	

	public void confirmFaceAdd(FaceDO face) {
		log.info("------->we confirm");
		

	}
	

	public void cancelFaceAdd(FaceDO face) {
		log.info("------->we cancel");
		List<ThirdHistoryDO> faceThirdDOs = thirdHistoryMapper.selectList(Wrappers.<ThirdHistoryDO>lambdaQuery()
				.eq(ThirdHistoryDO::getWeData, face.getId())
				.eq(ThirdHistoryDO::getRtype, Third.ADD));
		for (ThirdHistoryDO thirdHistoryDO : faceThirdDOs) {
			//如果只有几个的话,可以单独指定,如果是不确定有几个的话,还要根据third字段唯一标识来获取应该调用哪个第三方
			if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD1)) {
				third1FaceService.faceDelete(thirdHistoryDO.getThirdData());
			}
			
			if (Objects.equals(thirdHistoryDO.getThird(), Third.THIRD2)) {
				third1FaceService.faceDelete(thirdHistoryDO.getThirdData());
			}
		}
		
	}
	
	private ThirdHistoryDO buildModel(Integer id, String thirdId, String rtype, String third) {
		ThirdHistoryDO thirdHistoryDO = new ThirdHistoryDO();
		thirdHistoryDO.setWeData(String.valueOf(id));
		thirdHistoryDO.setThirdData(thirdId);
		thirdHistoryDO.setRtype(rtype);
		thirdHistoryDO.setThird(third);
		return thirdHistoryDO;
	}
	
}
本文参与 腾讯云自媒体同步曝光计划,分享自作者个人站点/博客。
原始发表:2024-09-01,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 作者个人站点/博客 前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
0 条评论
热度
最新
推荐阅读
相关产品与服务
对象存储
对象存储(Cloud Object Storage,COS)是由腾讯云推出的无目录层次结构、无数据格式限制,可容纳海量数据且支持 HTTP/HTTPS 协议访问的分布式存储服务。腾讯云 COS 的存储桶空间无容量上限,无需分区管理,适用于 CDN 数据分发、数据万象处理或大数据计算与分析的数据湖等多种场景。
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档