节点升级管控方法及电子设备与流程

摘要: 本申请涉及存储控制,尤其涉及一种节点升级管控方法及电子设备。背景技术:1、随着企业级数据中心的快速发展,高端多控分布式存储集群(如4控、8控集群)被广泛应用于关...
节点升级管控方法及电子设备与流程

本申请涉及存储控制,尤其涉及一种节点升级管控方法及电子设备。

背景技术:

1、随着企业级数据中心的快速发展,高端多控分布式存储集群(如4控、8控集群)被广泛应用于关键业务场景。此类系统通常需要在不中断上层业务读写的前提下,通过节点轮转方式完成版本更新。

2、目前,分布式存储集群的升级通常采用“主控下发-本地执行-结果上报”的控制模式。系统状态机仅设置三个基本状态:等待升级、升级中、成功或失败。由主控端向各节点下发升级指令后,节点进入“升级中”阶段,直至升级脚本执行完毕并返回成功或失败代码,才允许进行下一步操作。

3、然而,当升级脚本因分布式文件锁未释放、磁盘i/o(input/output,输入/输出)拥塞等原因导致进程挂起时,由于状态机仅有“升级中”这一状态,无法识别和处理该异常挂起状态,只能无限期等待,造成集群锁定风险。

技术实现思路

1、本申请提供了一种节点升级管控方法及电子设备,以至少解决相关技术中状态机仅有“升级中”这一状态,无法识别和处理该异常挂起状态,只能无限期等待,造成集群锁定风险的问题。

2、本申请提供了一种节点升级管控方法,该方法包括:在升级过程中,检测分布式存储系统中的目标节点上报的心跳报文中的时间戳,以确定目标节点的状态,心跳报文用于表征目标节点本地升级进程的执行进度;目标节点为分布式存储系统中的任一节点;若目标节点的状态为升级停滞状态,则对目标节点进行隔离,以阻止目标节点对集群共享资源的访问,升级停滞状态为目标节点升级进程无响应的状态;在确认隔离生效后,向目标节点下发回滚指令,以使目标节点恢复至升级前的状态。

3、本申请还提供了一种节点升级管控装置,该装置包括:检测模块,用于在升级过程中,检测分布式存储系统中的目标节点上报的心跳报文中的时间戳,以确定目标节点的状态,心跳报文用于表征目标节点本地升级进程的执行进度;隔离模块,用于若目标节点的状态为升级停滞状态,则对目标节点进行隔离,以阻止目标节点对集群共享资源的访问,升级停滞状态为目标节点升级进程无响应的状态;下发模块,用于在确认隔离生效后,向目标节点下发回滚指令,以使目标节点恢复至升级前的状态。

4、本申请还提供了一种电子设备,包括:存储器,用于存储计算机程序;处理器,用于执行计算机程序时实现上述任一种节点升级管控方法的步骤。

5、本申请还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,计算机程序被处理器执行时实现上述任一种节点升级管控方法的步骤。

6、本申请还提供了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现上述任一种节点升级管控方法的步骤。

7、通过本申请提供的节点升级管控方法及电子设备,其中,该节点升级管控方法通过在升级过程中检测分布式存储系统中目标节点上报的心跳报文中的时间戳以确定目标节点的状态,该心跳报文用于表征目标节点本地升级进程的执行进度,结合节点升级状态信息表中动态配置的超时挂起阈值与心跳时间戳,实现升级停滞状态的自动识别,解决了传统单一状态机无法感知进程隐性挂起的问题;若目标节点的状态为升级停滞状态,则对节点进行业务逻辑隔离以阻止目标节点对集群共享资源的访问,该升级停滞状态为目标节点升级进程无响应的状态,通过切断目标节点的虚拟地址漂移权限、阻断存储卷映射与共享元数据写入权限,将故障影响限定在节点本地,避免挂起目标节点持有的分布式锁等共享资源阻塞全集群调度,以避免集群锁定风险;最后,在确认隔离生效后,向目标节点下发回滚指令以使目标节点恢复至升级前的状态,以通过独立于业务通道的紧急控制链路触达本地执行代理,完成文件与元数据版本回退,实现升级挂起故障的自动化闭环修复,在保障集群业务连续性的同时消除了无限期等待导致的集群运行死锁隐患。

1.一种节点升级管控方法,其特征在于,包括:

2.根据权利要求1所述的方法,其特征在于,所述检测分布式存储系统中的目标节点上报的心跳报文中的时间戳,以确定所述目标节点的状态,包括:

3.根据权利要求2所述的方法,其特征在于,所述方法还包括:

4.根据权利要求2所述的方法,其特征在于,所述若所述差值超过预设超时阈值,则确定所述目标节点的状态为所述升级停滞状态,还包括:

5.根据权利要求1所述的方法,其特征在于,所述对所述目标节点进行隔离,包括:

6.根据权利要求1所述的方法,其特征在于,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述向所述目标节点下发回滚指令之后,所述方法还包括:

8.根据权利要求7所述的方法,其特征在于,所述方法还包括:

9.根据权利要求1所述的方法,其特征在于,所述以使所述目标节点恢复至升级前的状态之后,所述方法还包括:

10.一种电子设备,其特征在于,包括: