数据库系统恢复方法、数据库系统以及计算设备与流程
本说明书实施例涉及数据库,特别涉及一种数据库系统恢复方法、数据库系统以及计算设备。
背景技术:
1、随着数据库技术的发展, 数据库系统作为基础设施,承载着海量数据的存储、管理和分析任务。数据库系统的容错与恢复机制,在面对复杂多变的故障场景时,往往暴露出恢复时间过长、恢复过程复杂以及恢复后数据一致性难以保障等问题。
2、目前,针对数据库系统的恢复机制,通过在数据库系统运行过程中添加检查点,保存当前的数据库状态,并采用重放日志对数据库的修改操作进行记录,一旦发生故障需要恢复,就可以通过扫描、解析以及重放的方式,从检查点开始重放,将数据库系统恢复至故障场景前的状态。
3、然而,在大规模、高并发的项目场景下,在极短的时间内可能对数据库系统发生大量修改,产生了大量重放日志,导致故障恢复时要扫描、解析以及重放的日志量非常大,进而大大延长了数据库故障恢复时间,增加了资源成本和流程复杂性,检查点机制或者各种备份策略天然存在落后的情况,使得数据库系统在故障恢复期间造成的项目不可用情况,降低了数据库系统的可用性。因此,亟需一种恢复时间短、低资源成本、低流程复杂性、以及高可用性的数据库系统恢复机制。
技术实现思路
1、有鉴于此,本说明书实施例提供了一种数据库系统恢复方法。本说明书一个或者多个实施例同时涉及另一种数据库系统恢复方法,一种数据库系统,一种计算设备,一种计算机可读存储介质以及一种计算机程序,以解决现有技术中存在的技术缺陷。
2、根据本说明书实施例的第一方面,提供了一种数据库系统恢复方法,应用于数据库系统的读写节点,包括:
3、基于数据库系统的检查点,扫描重放日志的日志索引,确定目标日志索引,其中,日志索引为在对数据库系统中数据页的操作过程中、相对操作过程异步生成的,日志索引为按照预设批次生成的;
4、解析目标日志索引,确定目标日志索引对应的数据页的目标重放日志,并从持久化存储中获取目标重放日志;
5、基于目标重放日志,对数据库系统中数据页执行重放操作,获得恢复后的数据库系统。
6、根据本说明书实施例的第二方面,提供了另一种数据库系统恢复方法,应用于数据库系统的目标只读节点,其中,目标只读节点为数据库系统中至少一个只读节点作为新的读写节点的只读节点;该方法包括:
7、从持久化存储中加载重放日志的日志索引,并基于数据库系统的检查点,扫描日志索引,确定目标日志索引,其中,日志索引为在对数据库系统中数据页的操作过程中、相对操作过程异步生成的,日志索引为按照预设批次生成的;
8、解析目标日志索引,确定目标日志索引对应的数据页的目标重放日志,并从持久化存储中获取目标重放日志;
9、基于目标重放日志,对数据库系统中数据页执行重放操作,获得恢复后的数据库系统。
10、根据本说明书实施例的第三方面,提供了一种数据库系统,包括读写节点、持久化存储和内存缓存区;
11、其中,读写节点,用于:
12、基于数据库系统的检查点,扫描重放日志的日志索引,确定目标日志索引,其中,日志索引为在对数据库系统中数据页的操作过程中、相对操作过程异步生成的,日志索引为按照预设批次生成的;
13、解析目标日志索引,确定目标日志索引对应的数据页的目标重放日志,并将目标重放日志从持久化存储加载至内存缓存区;
14、基于目标重放日志,对数据库系统中数据页执行重放操作,获得恢复后的数据库系统。
15、根据本说明书实施例的第四方面,提供了一种计算设备,包括:
16、存储器和处理器;
17、该存储器用于存储计算机可执行指令,该处理器用于执行该计算机可执行指令,该计算机可执行指令被处理器执行时实现上述数据库系统恢复方法的步骤。
18、根据本说明书实施例的第五方面,提供了一种计算机可读存储介质,其存储有计算机可执行指令,该指令被处理器执行时实现上述数据库系统恢复方法的步骤。
19、根据本说明书实施例的第六方面,提供了一种计算机程序,其中,当该计算机程序在计算机中执行时,令计算机执行上述数据库系统恢复方法的步骤。
20、本说明书一个实施例中提供了一种数据库系统恢复方法,应用于数据库系统的读写节点,包括:基于数据库系统的检查点,扫描重放日志的日志索引,确定目标日志索引,其中,日志索引为在对数据库系统中数据页的操作过程中、相对操作过程异步生成的,日志索引为按照预设批次生成的;解析目标日志索引,确定目标日志索引对应的数据页的目标重放日志,并从持久化存储中获取目标重放日志;基于目标重放日志,对数据库系统中数据页执行重放操作,获得恢复后的数据库系统。
21、在读写节点上,通过预先建立的日志索引结构,按批次生成日志索引,只需要扫描可能存在的很短一部分日志即可,即与需要重放的日志量无关,可快速定位与数据页修改相关的目标日志索引,避免全量扫描海量日志文件,基于索引精准提取目标重放日志后,仅需对实际发生修改的部分数据页进行局部重放,就可以对外提供服务,较传统全量回放方式减少了日志解析量和重放量。采用异步索引生成机制,在数据页操作过程中,相对操作过程异步构建索引与持久化日志,既避免同步日志记录的性能损耗,又通过索引空间换时间的策略实现日志的按需精准加载。相较于传统检查点机制,该方案将恢复操作粒度细化至数据页级别,大幅降低重放过程中的资源成本。通过持久化存储保障日志完整性,确保恢复后数据强一致性,将系统不可用时间压缩至单一重启周期,显著提升数据库系统的高可用性。
1.一种数据库系统恢复方法,应用于数据库系统的读写节点,包括:
2.根据权利要求1所述的方法,所述数据库系统的重放日志的日志索引的生成步骤包括:
3.根据权利要求1所述的方法,所述从持久化存储中获取所述目标重放日志,包括:
4.根据权利要求3所述的方法,其中,所述预设批次基于所述内存缓存区的缓存大小和数据页大小设定;
5.根据权利要求4所述的方法,所述将所述目标重放日志中当前批次的目标重放日志,从持久化存储加载至内存缓存区,包括:
6.根据权利要求4所述的方法,所述基于所述当前批次的目标重放日志,对所述数据库系统中数据页执行重放操作,包括:
7.根据权利要求1-6任一项所述的方法,基于所述数据库系统的检查点,扫描重放日志的日志索引,确定目标日志索引,包括:
8.根据权利要求1-6任一项所述的方法,所述基于所述目标重放日志,对所述数据库系统中数据页执行重放操作,获得恢复后的数据库系统,包括:
9.根据权利要求8所述的方法,其中,所述关键事务数据页包括回滚数据页,针对所述回滚数据页的目标重放日志中记录有低于长度阈值的修改操作记录;所述方法还包括:
10.一种数据库系统恢复方法,应用于数据库系统的目标只读节点,其中,所述目标只读节点为所述数据库系统中至少一个只读节点作为新的读写节点的只读节点;所述方法包括:
11.一种数据库系统,包括读写节点、持久化存储和内存缓存区;
12.根据权利要求11所述的数据库系统,还包括至少一个只读节点,所述至少一个只读节点包括被确定作为新的读写节点的目标只读节点;
13.一种计算设备,包括:
14.一种计算机可读存储介质,其存储有计算机程序/指令,该计算机程序/指令被处理器执行时实现权利要求1至10任意一项所述方法的步骤。
15.一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现权利要求1至10任意一项所述方法的步骤。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com