分布式数据库中的事务上下文合并方法和装置与流程

摘要: 本说明书一个或多个实施例涉及数据库,尤其涉及一种分布式数据库中的事务上下文合并方法和装置。背景技术:1、一些数据库(例如oceanbase数据库)采用日志流(l...
分布式数据库中的事务上下文合并方法和装置与流程

本说明书一个或多个实施例涉及数据库,尤其涉及一种分布式数据库中的事务上下文合并方法和装置。

背景技术:

1、一些数据库(例如oceanbase数据库)采用日志流(log stream)作为事务参与的基本单元,并使用树形两阶段提交协议来管理跨节点的分布式事务。在线迁移(transfer)场景中,数据分片需要从源日志流动态迁移到目的日志流,以适应集群的负载变化。由于迁移必须在线进行,迁移期间活跃事务会在源日志流和目标日志流上同时保留上下文。

2、现有的在线迁移方案若要保证一致性往往需要暂停或终止活跃事务,这会严重影响业务连续性;若不终止事务,则面临如何调整树形提交路径、如何保证目的日志流具备回滚能力且不破坏协议状态的难题。

技术实现思路

1、本说明书一个或多个实施例描述了一种分布式数据库中的事务上下文合并方法和装置,可以实现在目标数据在线迁移过程中,无需暂停或终止活跃事务,即可维持目标数据的回滚能力、协议状态的可恢复性以及后续提交路径的参与者覆盖。

2、根据第一方面,提供了一种分布式数据库中的事务上下文合并方法,应用于包括多个日志流的分布式数据库系统,所述日志流用于承载一个或多个事务的事务上下文,所述方法包括:

3、响应于指示目标数据的归属从源日志流向目标日志流变更的预设事件,从所述源日志流持有的针对目标事务的源事务上下文中提取与所述目标数据相关的数据操作状态类别的字段,所述数据操作状态类别的字段用于支持本地数据回滚;

4、将所述数据操作状态类别的字段合并到所述目标日志流持有的目标事务上下文;

5、基于所述目标日志流参与目标事务的树形两阶段提交协议过程中形成的协议事实,确定所述目标事务上下文的协议参与状态;

6、将所述目标日志流加入所述目标事务的后续树形两阶段提交路径。

7、根据第二方面,提供了一种分布式数据库中的事务上下文合并装置,应用于包括多个日志流的分布式数据库系统,所述日志流用于承载一个或多个事务的事务上下文,所述装置包括:

8、提取模块,用于响应于指示目标数据的归属从源日志流向目标日志流变更的预设事件,从所述源日志流持有的针对目标事务的源事务上下文中提取与所述目标数据相关的数据操作状态类别的字段,所述数据操作状态类别的字段用于支持本地数据回滚;

9、合并模块,用于将所述数据操作状态类别的字段合并到所述目标日志流持有的目标事务上下文;

10、基于所述目标日志流参与目标事务的树形两阶段提交协议过程中形成的协议事实,确定所述目标事务上下文的协议参与状态;

11、加入模块,用于将所述目标日志流加入所述目标事务的后续树形两阶段提交路径。

12、根据第三方面,提供了一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现第一方面所述方法的步骤。

13、根据第四方面,提供了一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令计算机执行第一方面所述的方法。

14、根据第五方面,提供了一种计算设备,包括存储器和处理器,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现第一方面的方法。

15、在本说明书的实施例中,仅将用于支持本地数据回滚的数据操作状态类别字段合并至目标事务上下文中,同时不直接继承源事务上下文中的协议参与状态,而是基于目标日志流参与目标事务的树形两阶段提交协议过程中形成的协议事实确定目标事务上下文的协议参与状态。此外在合并操作执行完成之后,将目标日志流加入目标事务的后续树形两阶段提交路径,使得后续树形两阶段提交路径能够覆盖目标数据归属变更后的目标日志流。这样,在目标数据在线迁移过程中,无需暂停或终止目标事务,即可使目标日志流具备覆盖目标数据历史数据操作的本地回滚能力,实现回滚完整性;同时,目标事务上下文的协议参与状态由目标日志流自身形成的协议事实确定,实现协议可恢复性;后续树形两阶段提交路径覆盖目标数据归属变更后的目标日志流,实现提交路径正确性。由此,有利于在不停服场景下完成目标数据迁移,适应分布式数据库在线负载均衡的需求。

1.一种分布式数据库中的事务上下文合并方法,应用于包括多个日志流的分布式数据库系统,所述日志流用于承载一个或多个事务的事务上下文,所述方法包括:

2.根据权利要求1所述的方法,其中,所述将所述目标日志流加入所述目标事务的后续树形两阶段提交路径,包括:

3.根据权利要求2所述的方法,其中,所述在所述当前协议阶段切换到下一协议阶段时,将所述临时参与节点加入下一协议阶段的参与者集合中,包括:

4.根据权利要求2所述的方法,其中,所述将所述临时参与节点加入下一协议阶段的参与者集合中,之后还包括:

5.根据权利要求1所述的方法,其中,所述目标日志流在所述树形两阶段提交协议中为中间节点,所述目标日志流对其父节点表现为参与者,对其子节点或后续目标日志流表现为协调者。

6.根据权利要求1所述的方法,其中,所述源事务上下文记录有协议阶段标识、协调者标识、参与者集合中的至少一项。

7.根据权利要求1所述的方法,其中,所述数据操作状态类别的字段包括:最后系统变更号、最大已提交日志序列号、事务数据起止时间戳、锁内存上下文、撤销记录引用中的至少一个字段。

8.一种分布式数据库中的事务上下文合并装置,应用于包括多个日志流的分布式数据库系统,所述日志流用于承载一个或多个事务的事务上下文,所述装置包括:

9.一种计算机可读存储介质,其上存储有计算机程序,当所述计算机程序在计算机中执行时,令计算机执行权利要求1-8中任一项所述的方法。

10.一种计算设备,包括存储器和处理器,其中,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现权利要求1-8中任一项所述的方法。