数据库管理方法、系统及存储介质与流程
本技术涉及分布式,具体而言,涉及一种数据库管理方法、系统及存储介质。
背景技术:
1、在支持历史时点查询的多版本并发控制(multi-version concurrency control,mvcc)数据库中,为降低存储与维护成本,现有技术常将同一业务分区的数据按时间维度划分为当前层及多个历史层,各层数据库独立执行更新与清理作业。然而,由于各层级数据库的更新频率、清理周期及资源调度存在差异,导致各层级的实际时间覆盖范围推进进度不同步。当较新层级清理过期数据或推进时间边界时,若较旧层级尚未完成数据追赶或覆盖,极易在相邻层级的时间区间连接处产生断层,形成历史查询时间空洞。这种数据覆盖的不连续性使得特定历史时点的查询请求无法找到对应的有效数据,导致历史查询失败,严重影响了业务数据的完整性与连续性。
2、针对相关技术中在多层数据库架构中各层级数据库维护进度不同步,导致数据库中业务数据连续性差的问题,目前尚未提出有效的解决方案。
技术实现思路
1、本技术的主要目的在于提供一种数据库管理方法、系统及存储介质,以解决相关技术中在多层数据库架构中各层级数据库维护进度不同步,导致数据库中业务数据连续性差的问题。
2、为了实现上述目的,根据本技术的一个方面,提供了一种数据库管理方法。该方法包括:通过生命周期管理中心确定待发布的候选路由基准,并根据候选路由基准计算时间层级数据库集群中每个时间层级数据库对应的候选目标时间范围,其中,候选路由基准用于更新当前已发布路由基准,当前已发布路由基准对应当前时间层级数据库的目标起始时间;检查每个时间层级数据库的实际时间范围是否覆盖对应的候选目标时间范围;将实际时间范围未覆盖对应的候选目标时间范围的时间层级数据库确定为待更新数据库,并调度待更新数据库从数据源接入模块获取缺失时间区间的数据,根据缺失时间区间的数据构建候选数据库版本,并更新候选数据库版本的实际时间范围;在所有时间层级数据库的实际时间范围均覆盖对应的候选目标时间范围,且相邻时间层级数据库的实际时间范围连续或重叠的情况下,对候选路由基准和每个时间层级数据库对应的最新数据库版本执行原子发布,其中,最新数据库版本为候选数据库版本或原有的已发布数据库版本。
3、可选地,时间层级数据库集群包括针对每个业务纵向分区的当前时间层级数据库和至少一个历史时间层级数据库,根据候选路由基准计算时间层级数据库集群中每个时间层级数据库对应的候选目标时间范围包括:将候选路由基准确定为当前时间层级数据库的候选目标时间范围的起始时间,并将当前时间层级数据库的候选目标时间范围确定为从起始时间至无穷大上界的区间;基于时间层级边界规则,依次计算每个历史时间层级数据库的候选目标时间范围,将候选路由基准确定为第一个历史时间层级数据库的候选目标时间范围的终止时间,第i个历史时间层级数据库的候选目标时间范围的终止时间为第i-1个历史时间层级数据库的候选目标时间范围的起始时间,第i个历史时间层级数据库的候选目标时间范围的起始时间为第i个历史时间层级数据库的候选目标时间范围的终止时间减去预设时间间隔,其中,i为大于1的正整数。
4、可选地,调度待更新数据库从数据源接入模块获取缺失时间区间的数据,根据缺失时间区间的数据构建候选数据库版本,并更新候选数据库版本的实际时间范围包括:计算待更新数据库的候选目标时间范围与实际时间范围的差集,得到缺失时间区间;调度待更新数据库向数据源接入模块发送数据请求,从数据源接入模块获取缺失时间区间的数据;根据缺失时间区间的数据构建候选数据库版本,并更新候选数据库版本的实际时间范围。
5、可选地,对候选路由基准和每个时间层级数据库对应的最新数据库版本执行原子发布包括:根据候选路由基准和每个时间层级数据库的最新数据库版本,生成生命周期清单;对候选路由基准、每个时间层级数据库对应的最新数据库版本和生命周期清单执行原子发布。
6、可选地,在对候选路由基准和每个时间层级数据库对应的最新数据库版本执行原子发布之后,该方法还包括:通过生命周期管理中心确定待清理的目标时间层级数据库,并根据候选路由基准确定目标时间层级数据库的候选保留边界;清理目标时间层级数据库中失效时间早于候选保留边界的记录,生成清理后的数据库版本,并更新目标时间层级数据库对应的实际时间范围;在清理后的数据库版本通过完整性校验的情况下,将目标时间层级数据库切换为清理后的数据库版本。
7、可选地,在通过生命周期管理中心确定待发布的候选路由基准,并根据候选路由基准计算时间层级数据库集群中每个时间层级数据库对应的候选目标时间范围之前,该方法还包括:确定每个业务纵向分区的历史时间层级数据库的层级数量、每个时间层级数据库的目标时间范围生成规则、每个时间层级数据库对应的配置资源参数和初始路由基准;根据层级数量、每个时间层级数据库的目标时间范围生成规则、每个时间层级数据库对应的配置资源参数和初始路由基准,创建时间层级数据库集群中的当前时间层级数据库实例和至少一个历史时间层级数据库实例;将层级数量、每个时间层级数据库的目标时间范围生成规则、每个时间层级数据库对应的配置资源参数、初始路由基准和每个时间层级数据库的实例标识存储至生命周期管理中心,以建立时间层级数据库集群与生命周期管理中心之间的映射关系。
8、为了实现上述目的,根据本技术的另一方面,提供了一种数据库管理系统。该系统包括:时间层级数据库集群,包括针对每个业务纵向分区的当前时间层级数据库和至少一个历史时间层级数据库,其中,每个时间层级数据库用于独立存储记录;数据源接入模块,用于向时间层级数据库集群中的时间层级数据库提供缺失时间区间的数据;生命周期管理中心,用于确定待发布的候选路由基准,并根据候选路由基准计算每个时间层级数据库的候选目标时间范围,将实际时间范围未覆盖对应的候选目标时间范围的时间层级数据库确定为待更新数据库,调度待更新数据库从数据源接入模块获取缺失时间区间的数据,根据缺失时间区间的数据构建候选数据库版本,并更新候选数据库版本的实际时间范围,检查每个时间层级数据库的实际时间范围是否覆盖对应的候选目标时间范围,且相邻时间层级数据库的实际时间范围连续或重叠,在检查通过的情况下,对候选路由基准和每个时间层级数据库对应的最新数据库版本执行原子发布。
9、根据本技术的另一方面,提供了一种计算机可读存储介质,计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行任意一种数据库管理方法。
10、根据本技术的另一方面,提供了一种电子设备,包括:一个或多个处理器,存储器,以及一个或多个程序,其中,一个或多个程序被存储在存储器中,并且被配置为由一个或多个处理器执行,一个或多个程序包括用于执行任意一种数据库管理方法。
11、根据本技术的另一方面,提供了一种计算机程序产品,包括计算机指令,计算机指令被处理器执行时实现上述任意一项的数据库管理方法的步骤。
12、在本技术实施例中,通过生命周期管理中心确定待发布的候选路由基准,并根据候选路由基准计算时间层级数据库集群中每个时间层级数据库对应的候选目标时间范围,其中,候选路由基准用于更新当前已发布路由基准,当前已发布路由基准对应当前时间层级数据库的目标起始时间;检查每个时间层级数据库的实际时间范围是否覆盖对应的候选目标时间范围;将实际时间范围未覆盖对应的候选目标时间范围的时间层级数据库确定为待更新数据库,并调度待更新数据库从数据源接入模块获取缺失时间区间的数据,根据缺失时间区间的数据构建候选数据库版本,并更新候选数据库版本的实际时间范围;在所有时间层级数据库的实际时间范围均覆盖对应的候选目标时间范围,且相邻时间层级数据库的实际时间范围连续或重叠的情况下,对候选路由基准和每个时间层级数据库对应的最新数据库版本执行原子发布,其中,最新数据库版本为候选数据库版本或原有的已发布数据库版本,解决了在多层数据库架构中各层级数据库维护进度不同步,导致数据库中业务数据连续性差的技术问题。
13、在本技术中,通过生命周期管理中心生成候选路由基准,并计算每个层级数据库的候选目标时间范围,检查各层数据库实际时间范围是否覆盖候选目标范围,若未覆盖,识别为待更新数据库,从数据源接入模块获取缺失时间区间的数据并构建候选数据库版本,更新实际时间范围,精准定位因维护滞后而导致数据覆盖不足的层级数据库,避免因更新延迟造成的局部数据缺失,校验所有层级数据库的实际时间范围是否覆盖目标时间范围,且相邻层级数据库的实际时间范围连续或重叠,校验通过后,将候选路由基准和所有层级数据库对应的最新数据库版本进行原子发布,保证了全局历史时间轴的完整性,实现了提高数据库中业务数据的连续性的技术效果。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com