那些用Go实现的分布式事务框架

简介: 那些用Go实现的分布式事务框架

Seata简介


Seata是由阿里开源的分布式事务服务,目前为用户提供了AT、TCC、SAGA、XA的事务模式,整体采用的是两阶段提交协议。Go版的seata-golang 目前好像只实现了mysql的AT、TCC模式,作者现在不咋更新了。

Seata 有几个核心角色

  • TC(Transaction Coordinator) -事务协调者。(维护全局和分支事务的状态,驱动全局事务提交或回滚)
  • TM(Transaction Manager)-事务管理器。(定义全局事务的范围:开始全局事务、提交或回滚全局事务。)
  • RM(Resource Manager)-资源管理器。(管理分支事务处理的资源,与TC交谈以注册分支事务和报告分支事务的状态,并驱动分支事务提交或回滚)

当然这样看,可能还不是很理解,我拿一张官网的图加以解释


1668514011631.jpg


从上图中可以看出,这三个角色所负责的工作如下

TC

  • 维护全局和分支事务状态,需要进行存储。
  • 当一个分布式事务处理结束,需要通知到每个RM是commit还是rollback

TM

  • 向TC请求开启一个分布式事务,得到一个全局唯一的分布式id。
  • 根据每个参与分布式事务的RM一阶段的反馈,决定二阶段向TC请求此次分布式事务是commit还是rollback(绝大部分场景下,一阶段任一RM失败,本次分布式事务失败)

RM

说的白一点就是管理参与分布式事务的各个服务(比如经典下单场景中涉及到的:订单服务、库存服务、营销服务等)

ps:个人感觉,这里的RM有点类似微服务中的中间处理层(专业术语他们管这叫bff->backend for fronted)。

  • 一阶段 prepare 行为(主动):每个RM调用 自定义 的 prepare 逻辑。
  • 二阶段 commit 行为(被动触发):如果本次分布式事务第一阶段全部RM成功,TC处理完自身状态变更后,调用各个RM自定义 的 commit 逻辑。(一阶段RM全部成功)
  • 二阶段 rollback 行为(被动触发):如果本次分布式事务第一阶段任一RM失败,TC处理完自身状态变更后,调用各个RM自定义 的 rollback 逻辑。(一阶段任意RM失败)


好了。下面可以看看seata-golang 实现的一些细节了,seata-golang 底层采用gRPC进行通信。


seata-golang


我们先看RM部分结构。


1668514031704.jpg


至于managers,保存支持的各大事务模式实现(TCC、XA等),每个模式只需要实现此接口即可


1668514045175.jpg


再看TC部分结构(去除部分字段)


1668514057304.jpg


TC对数据的存储目前支持mysql和pgsql,即只要实现SessionManager接口,然后注入到SessionHolder的manager。


介绍完这两个基本结构,还记得我们上面说过他们之间的关系吗?


二阶段TC会根据当前事务状态去通知RM是commit还是rollback。


在初始化ResourceManager 的时候,


1668514073133.jpg


我们看到最终会调用TC一个 grpc 接口branchCommunicate。


1668514084360.jpg


对应到服务端


1668514094386.jpg


我们知道gRPC有四种基础的通信模式。

  • 一元模式(Unary RPC)
  • 服务器端流RPC(Server Sreaming RPC)
  • 客户端流RPC(Client Streaming RPC)
  • 双向流RPC(Bidirectional Streaming RPC)

想要流的形式也很简单,只需要在proto方法定义中将对应的请求|响应 参数前加上stream标记,那么这个接口就是流式传送了。至于是哪种流,取决于你把stream加在哪边,如果请求和响应都加,那么就是双向流了。


客户端和服务端都可以通过stream.Send 发送请求,通过stream.Recv 接收数据。

当RM调用BranchCommunicate时


1668514109258.jpg


最终处理分支事务调用manager.BranchCommit


1668514123302.jpg


相应的,当TC被RM调用BranchCommunicate 后,


1668514134351.jpg


上面要发送给RM 通知commit 或者 rollback 数据是咋么来的呢?


当TC要通知RM进行分支commit 的时候,


1668514150175.jpg


最后一个就是TM,没啥理解难度。


1668514161451.jpg


其实seat-golang还有别的可以提一提的。


比如说,它里面通过go反射实现的动态代理功能(虽然我觉得完全没必要?),我懒得写了。


这篇文章再写就更长了,不继续写dtm了,感兴趣的留个言,我看看要不要写一篇dtm。


参考


相关文章
|
3天前
|
机器学习/深度学习 自然语言处理 并行计算
DeepSpeed分布式训练框架深度学习指南
【11月更文挑战第6天】随着深度学习模型规模的日益增大,训练这些模型所需的计算资源和时间成本也随之增加。传统的单机训练方式已难以应对大规模模型的训练需求。
21 3
|
7天前
|
机器学习/深度学习 并行计算 Java
谈谈分布式训练框架DeepSpeed与Megatron
【11月更文挑战第3天】随着深度学习技术的不断发展,大规模模型的训练需求日益增长。为了应对这种需求,分布式训练框架应运而生,其中DeepSpeed和Megatron是两个备受瞩目的框架。本文将深入探讨这两个框架的背景、业务场景、优缺点、主要功能及底层实现逻辑,并提供一个基于Java语言的简单demo例子,帮助读者更好地理解这些技术。
18 2
|
28天前
|
分布式计算 Hadoop
Hadoop-27 ZooKeeper集群 集群配置启动 3台云服务器 myid集群 zoo.cfg多节点配置 分布式协调框架 Leader Follower Observer
Hadoop-27 ZooKeeper集群 集群配置启动 3台云服务器 myid集群 zoo.cfg多节点配置 分布式协调框架 Leader Follower Observer
40 1
|
2月前
|
JSON Go API
使用Go语言和Gin框架构建RESTful API:GET与POST请求示例
使用Go语言和Gin框架构建RESTful API:GET与POST请求示例
|
2月前
|
数据采集 分布式计算 MaxCompute
MaxCompute 分布式计算框架 MaxFrame 服务正式商业化公告
MaxCompute 分布式计算框架 MaxFrame 服务于北京时间2024年09月27日正式商业化!
69 3
|
2月前
|
负载均衡 监控 Dubbo
分布式框架-dubbo
分布式框架-dubbo
|
28天前
|
存储 SQL 消息中间件
Hadoop-26 ZooKeeper集群 3台云服务器 基础概念简介与环境的配置使用 架构组成 分布式协调框架 Leader Follower Observer
Hadoop-26 ZooKeeper集群 3台云服务器 基础概念简介与环境的配置使用 架构组成 分布式协调框架 Leader Follower Observer
42 0
|
2月前
|
运维 NoSQL Java
SpringBoot接入轻量级分布式日志框架GrayLog技术分享
在当今的软件开发环境中,日志管理扮演着至关重要的角色,尤其是在微服务架构下,分布式日志的统一收集、分析和展示成为了开发者和运维人员必须面对的问题。GrayLog作为一个轻量级的分布式日志框架,以其简洁、高效和易部署的特性,逐渐受到广大开发者的青睐。本文将详细介绍如何在SpringBoot项目中接入GrayLog,以实现日志的集中管理和分析。
198 1
|
2月前
|
XML 负载均衡 监控
分布式-dubbo-简易版的RPC框架
分布式-dubbo-简易版的RPC框架
|
2月前
|
消息中间件 NoSQL Go
PHP转Go系列 | ThinkPHP与Gin框架之Redis延时消息队列技术实践
【9月更文挑战第7天】在从 PHP 的 ThinkPHP 框架迁移到 Go 的 Gin 框架时,涉及 Redis 延时消息队列的技术实践主要包括:理解延时消息队列概念,其能在特定时间处理消息,适用于定时任务等场景;在 ThinkPHP 中使用 Redis 实现延时队列;在 Gin 中结合 Go 的 Redis 客户端库实现类似功能;Go 具有更高性能和简洁性,适合处理大量消息。迁移过程中需考虑业务需求及系统稳定性。

热门文章

最新文章