OBCP第五章 分布式事务高级技术-分布式两阶段提交

本文涉及的产品
日志服务 SLS,月写入数据量 50GB 1个月
简介: OBCP第五章 分布式事务高级技术-分布式两阶段提交
+关注继续查看

两阶段协议

2PC是一个非常经典的强一致、中心化的原子提交协议。中心化指的是协调者(Coordinator),强一致性指的是需要所有参与者(participant)均要执行成功才算成功,否则回滚。


第一阶段:协调者(coordinator)发起提议通知所有的参与者(participant),参与者收到提议后,本地尝试执行事务,但并不commit,之后给协调者反馈,反馈可以是yes或者no


第二阶段:协调者收到参与者的反馈后,决定commit或者rollback,参与者全部同意则commit,如果有一个参与者不同意则rollback

image

OceanBase两阶段提交协议

标准两阶段提交协议

优点:状态简单,只依靠协调者状态即可确认和推进整个事务状态

缺点:协调者写日志,commit延时高

OceanBase两阶段提交协议

协调者不写日志,变成了一个无持久化状态的状态机

事务的状态由参与者的持久化状态决定

所有参与者都prepare成功即认为事务进入提交状态,立即返回客户端commit

每个参与者都需要持久化参与者列表,方便异常恢复时构建协调者状态机,推进事务状态

参与者增加clear阶段,标记事务状态机是否终止

image



OB两阶段提交

业务不感知是否分布式事务,如果只有一个参与者使用一阶段提交;否则自动使用两阶段提交

参与者的实体是 Partition(Px,Py,Pz)

指定第一个参与者 Px 作为协调者,发送 end_trans 消息给 Px 并告知参与者列表:Px,Py,Pz

image


OB两阶段提交延迟分析

用户感知的commit延迟

标准:4次日志延迟 + 2次RPC延迟

OB:1次日志延迟 + 2次RPC延迟

image

分布式事务的高可用

如果事务在prepare状态落盘之前发生宕机,机器恢复后事务会回滚

image



如果事务处于commit阶段,由于clog已经落盘,即 使发生宕机场景,事务都会执行完成,只是业务端可能会收到事务unknown的回复,需要业务端confirm 事务的状态

                          image

两阶段提交过程中参与者宕机

还未进入Prepared状态

参与者所有事务状态丢失

参与者会应答协调者prepare unknown消息

事务最终会abort

image


已进入Prepared状态

状态已经Paxos同步

系统会自动选择一个副本,作为新的leader并恢复

出prepare状态,协调者继续推进

image


协调者与第一个参与者是同一个partition

参与者状态机恢复遵从参与者自己的逻辑

协调者状态机恢复由参与者回复协调者的消息触发

参与者发送prepare ok后未收到协调者进一步消息(commit/abort)时,认为

上一条回复消息丢失,会定时重新发送上一条消息

所有参与者都记录全部参与者列表

分布式事务优化

分布式事务底层优化

单分区事务:不走2PC ,直接写一条日志即可完成事务提交

单机多分区事务→ 优化的两阶段提交

多机多分区事务→完整的两阶段提交 →prepare, commit/abor

分布式事务调优方法

业务数据模型设计原则:尽量避免跨机分布式事务

单sql语句不建议跨机器,通过table group、primary_zone把相关的表的leader

放在同一个机器上

慎重选择事务中的第一条语句,因为Obproxy的路由规则

相关实践学习
日志服务之使用Nginx模式采集日志
本文介绍如何通过日志服务控制台创建Nginx模式的Logtail配置快速采集Nginx日志并进行多维度分析。
相关文章
|
28天前
|
缓存 NoSQL Redis
分布式系列教程(04) -分布式Redis缓存 (事务&主从复制&哨兵机制)
分布式系列教程(04) -分布式Redis缓存 (事务&主从复制&哨兵机制)
75 0
|
2月前
|
存储 Java 测试技术
35分布式电商项目 - 注解式事务配置(运营商后台)
35分布式电商项目 - 注解式事务配置(运营商后台)
13 1
|
3月前
|
Oracle 关系型数据库 分布式数据库
OBCP第五章 分布式事务高级技术-分布式两阶段提交
OBCP第五章 分布式事务高级技术-分布式两阶段提交
50 0
|
10月前
|
消息中间件 缓存 网络协议
如何通过事务消息保障抢购业务的分布式一致性?
作者:山猎,阿里云解决方案架构师
157 0
如何通过事务消息保障抢购业务的分布式一致性?
|
SQL JSON 算法
【微服务38】分布式事务Seata源码解析六:全局/分支事务分布式ID如何生成?序列号超了怎么办?时钟回拨问题如何处理?
【微服务38】分布式事务Seata源码解析六:全局/分支事务分布式ID如何生成?序列号超了怎么办?时钟回拨问题如何处理?
514 1
【微服务38】分布式事务Seata源码解析六:全局/分支事务分布式ID如何生成?序列号超了怎么办?时钟回拨问题如何处理?
|
分布式数据库 数据库 索引
《事务、全局索引、透明分布式》电子版地址
分布式数据库通常按照“分区键” 切分数据,由不同节点处理不同分区的数据,以较低的成本获得良好的性能和可扩展性。但 “如何选择分区键” 会引出一连串疑问,“跨分区事务,多维度查询,哪些表需要分区...”,这些疑问显著增加了用户从单机数据库迁移到分布式数据库的难度。透明分布式允许用户不需要指定分区键,其核心技术是分布式事务与全局索引,能够极大的降低用户使用 PolarDB-X 的成本。
53 0
《事务、全局索引、透明分布式》电子版地址
|
SQL 存储 算法
事务、全局索引、透明分布式,再见,分区健!
在刚刚发布的PolarDB-X 2.1.0版本中,开源了透明分布式能力,能带给用户完全不同的透明分布式数据库使用体验。其中,一个最明显的不同,就是用户不再需要关注分区健这个概念,这也是副标题《再见,分区健》的来由。
1110 0
事务、全局索引、透明分布式,再见,分区健!
|
Dubbo Java 关系型数据库
【分布式事务】tcc-transaction分布式TCC型事务框架搭建与实战案例(基于Dubbo/Dubbox)
作者个人研发的在高并发场景下,提供的简单、稳定、可扩展的延迟消息队列框架,具有精准的定时任务和延迟队列处理功能。自开源半年多以来,已成功为十几家中小型企业提供了精准定时调度方案,经受住了生产环境的考验。为使更多童鞋受益,现给出开源框架地址: https://github.com/sunshinelyz/mykit-delay PS: 欢迎各位Star源码,也可以pr你牛逼哄哄的代码。
179 0
|
Dubbo Java 关系型数据库
tcc-transaction分布式TCC型事务框架搭建与实战案例(基于Dubbo/Dubbox)
一定分布式开发经验的朋友都知道,产品/项目/系统最初为了能够快速迭代上线,往往不太注重产品/项目/系统的高可靠性、高性能与高扩展性,采用单体应用和单实例数据库的架构方式快速迭代开发;当产品/项目/系统做到一定规模的时候,原有的系统架构则不足以支撑义务发展需要
355 0
|
消息中间件 缓存 网络协议
如何通过事务消息保障抢购业务的分布式一致性?
在柔性事务的多种实现中,事务消息是最为优雅易用的一种。基于阿里云RocketMQ高性能、高可用的特点,完全可以胜任抢购业务这类高并发大流量的场景。但引入事务消息机制在实现高性能的同时,也增加了整体的业务复杂度。我们需要对业务场景进行充分评估,选择与自身业务特点最为匹配的一种,才能更好地发挥柔性事务的价值。
3019 0
热门文章
最新文章
推荐文章
更多