一种分布式数据库的全局索引表构建方法、装置及设备与流程

摘要: 本申请实施例涉及计算机,尤其涉及分布式数据库,具体涉及一种分布式数据库的全局索引表构建方法、装置及设备。背景技术:1、现有分布式数据库均支持在线无阻塞创建全局索...
一种分布式数据库的全局索引表构建方法、装置及设备与流程

本申请实施例涉及计算机,尤其涉及分布式数据库,具体涉及一种分布式数据库的全局索引表构建方法、装置及设备。

背景技术:

1、现有分布式数据库均支持在线无阻塞创建全局索引,核心思路为采用“存量异步迁移+增量实时双写”的三段式架构,避免主表加锁阻塞业务写入。

2、在全局索引在线构建的双写阶段,业务同时存在新增、删除dml操作,极易出现同一业务唯一键值,先删除、后新增的并发场景,此时原始业务唯一键值重复,会触发唯一索引约束冲突;为解决该问题,现有技术全部依赖逻辑层冲突规避机制,通过事务串行、版本比对、锁等待拦截重复数据写入,但依赖于锁与事务逻辑兜底,锁竞争与版本校验会产生性能开销,高并发场景下频繁出现锁等待、事务回滚,降低业务吞吐量,而依赖事务机制兜底,存在极端并发下数据一致性风险。

技术实现思路

1、本申请提供了一种分布式数据库的全局索引表构建方法、装置及设备,以实现分布式数据库全局索引的无锁构建。

2、根据本申请的一方面,提供了一种分布式数据库的全局索引表构建方法,该方法包括:

3、在接收到携带在线操作标识的索引构建指令时,根据目标分布式数据库的当前数据库基表的当前业务字段,以及所述索引构建指令,确定所述目标分布式数据库的初始全局索引辅助表;

4、根据预设墓碑标识符,以及所述目标分布式数据库中各数据分区的全局唯一标识符,对所述初始全局索引辅助表进行物理约束,得到所述目标分布式数据库的可用全局索引辅助表,并将所述可用全局索引辅助表的状态修改为迁移中间状态;

5、根据所述当前数据库基表的当前存量数据,对所述可用全局索引辅助表进行数据写入,得到所述目标分布式数据库的目标全局索引辅助表,并将所述目标全局索引辅助表的状态修改为正常读写状态。

6、根据本申请的另一方面,提供了一种分布式数据库的全局索引表构建装置,该装置包括:

7、索引表构建模块,用于在接收到携带在线操作标识的索引构建指令时,根据目标分布式数据库的当前数据库基表的当前业务字段,以及所述索引构建指令,确定所述目标分布式数据库的初始全局索引辅助表;

8、索引表约束模块,用于根据预设墓碑标识符,以及所述目标分布式数据库中各数据分区的全局唯一标识符,对所述初始全局索引辅助表进行物理约束,得到所述目标分布式数据库的可用全局索引辅助表,并将所述可用全局索引辅助表的状态修改为迁移中间状态;

9、数据迁移模块,用于根据所述当前数据库基表的当前存量数据,对所述可用全局索引辅助表进行数据写入,得到所述目标分布式数据库的目标全局索引辅助表,并将所述目标全局索引辅助表的状态修改为正常读写状态。

10、根据本申请的另一方面,提供了一种电子设备,所述电子设备包括:

11、一个或多个处理器;

12、存储器,用于存储一个或多个程序;

13、当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本申请实施例所提供的任意一种分布式数据库的全局索引表构建方法。

14、根据本申请的另一方面,提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本申请实施例所提供的任意一种分布式数据库的全局索引表构建方法。

15、根据本申请的另一方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现本申请实施例所提供的任意一种分布式数据库的全局索引表构建方法。

16、本申请通过在接收到携带在线操作标识的索引构建指令时,根据目标分布式数据库的当前数据库基表的当前业务字段,以及索引构建指令,确定目标分布式数据库的初始全局索引辅助表;根据预设墓碑标识符,以及目标分布式数据库中各数据分区的全局唯一标识符,对初始全局索引辅助表进行物理约束,得到目标分布式数据库的可用全局索引辅助表,并将可用全局索引辅助表的状态修改为迁移中间状态;根据当前数据库基表的当前存量数据,对可用全局索引辅助表进行数据写入,得到目标分布式数据库的目标全局索引辅助表,并将目标全局索引辅助表的状态修改为正常读写状态。上述技术方案,通过墓碑标识符和全局唯一标识符对辅助表进行物理约束,使辅助表的真实唯一规则升级为业务唯一键+墓碑字段的复合唯一结构,实现了真正意义上的业务无感知、无阻塞、无竞争的无锁索引构建。

1.一种分布式数据库的全局索引表构建方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述根据预设墓碑标识符,以及所述目标分布式数据库中各数据分区的全局唯一标识符,对所述初始全局索引辅助表进行物理约束,得到所述目标分布式数据库的可用全局索引辅助表,包括:

3.根据权利要求2所述的方法,其特征在于,所述根据所述当前数据库基表的当前存量数据,对所述可用全局索引辅助表进行数据写入,得到所述目标分布式数据库的目标全局索引辅助表,包括:

4.根据权利要求3所述的方法,其特征在于,所述根据所述当前数据库基表的当前存量数据,对所述可用全局索引辅助表进行数据写入,得到所述目标分布式数据库的目标全局索引辅助表,还包括:

5.根据权利要求4所述的方法,其特征在于,将所述新事务的当前增量数据写入所述当前数据库基表,并同步将所述当前增量数据写入所述可用全局索引辅助表,包括:

6.根据权利要求1所述的方法,其特征在于,将所述目标全局索引辅助表的状态修改为正常读写状态,包括:

7.一种分布式数据库的全局索引表构建装置,其特征在于,包括:

8.一种电子设备,其特征在于,包括:

9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6任一项所述的分布式数据库的全局索引表构建方法。

10.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-6中任一项所述的分布式数据库的全局索引表构建方法。