资源调度方法及装置与流程

摘要: 本公开涉及通信,尤其涉及一种资源调度方法及装置。背景技术:1、在分布式云算力服务场景下,通常由多个分散部署的服务节点共同为用户提供计算资源。相关技术中,计算资源...
资源调度方法及装置与流程

本公开涉及通信,尤其涉及一种资源调度方法及装置。

背景技术:

1、在分布式云算力服务场景下,通常由多个分散部署的服务节点共同为用户提供计算资源。相关技术中,计算资源多由各服务节点独立调度与管理;然而,用户跨节点访问时资源权限无法延续,资源供需易发生错配。

技术实现思路

1、本公开提供了一种资源调度方法及装置,以解决相关技术中计算资源多由各服务节点独立调度与管理;然而,用户跨节点访问时资源权限无法延续,资源供需易发生错配的问题。

2、根据本公开的第一方面实施例,提供了一种资源调度方法,包括:

3、获取用户标识,并获取与所述用户标识绑定的资源授权凭据;其中,所述资源授权凭据用于指示所述用户标识对应的目标用户在各个云服务节点的可用资源;

4、根据所述目标用户的行为特征及所述各个云服务节点的资源状态信息,确定所述目标用户针对所述各个云服务节点的调度优先级;

5、根据所述资源授权凭据及所述调度优先级,生成所述目标用户对应的资源调度策略。

6、在本公开的一些实施例中,在所述获取用户标识之前,所述方法还包括:

7、确定所述目标用户所使用的目标设备的资源计量参数;其中,所述资源计量参数基于所述目标设备的性能参数、使用时长以及任务类型确定,所述性能参数用于指示所述目标设备相对于基准设备的性能,所述任务类型用于指示所执行的任务对计算资源的消耗程度;

8、生成所述目标用户对应的所述用户标识,并配置所述用户标识绑定的所述资源授权凭据;其中,所述资源授权凭据中的可用资源基于所述资源计量参数确定。

9、在本公开的一些实施例中,在所述获取用户标识,并获取与所述用户标识绑定的资源授权凭据之后,所述方法还包括:

10、在所述目标设备为单台的情况下,根据所述目标设备的所述性能参数、所述使用时长、所述任务类型、并行任务数、最大并行容量及负载系数,确定所述目标用户所执行任务对应的资源消耗量,并从所述资源授权凭据中去除所述资源消耗量;

11、在确定所述目标设备为至少两台且所述目标用户所执行任务为至少两个任务的情况下,根据所述目标设备的所述性能参数、所述使用时长、所述任务类型及资源冲突修正量,确定所述目标用户所执行任务对应的资源消耗总量,并从所述资源授权凭据中去除所述资源消耗总量;其中,所述资源冲突修正量用于反映至少两台目标设备运行时因资源争用及通信损耗导致的额外资源消耗。

12、在本公开的一些实施例中,在所述根据所述目标用户的行为特征及所述各个云服务节点的资源状态信息,确定所述目标用户针对所述各个云服务节点的调度优先级之前,所述方法还包括:

13、获取所述目标用户的历史行为数据及实时行为数据;

14、对所述历史行为数据及所述实时行为数据进行加权融合处理,生成综合行为特征向量;

15、将所述综合行为特征向量输入至预先训练的分类预测网络模型,确定所述目标用户的行为标签及行为修正系数;其中,所述行为特征包括所述行为标签及所述行为修正系数,所述行为标签用于所述目标用户的活跃时段特征,所述行为修正系数用于调整所述调度优先级参数。

16、在本公开的一些实施例中,所述根据所述目标用户的行为特征及所述各个云服务节点的资源状态信息,确定所述目标用户针对所述各个云服务节点的调度优先级,包括:

17、根据目标设备的资源计量参数、所述各个云服务节点的资源占用率、所述用户的资源请求热度信息确定的热度系数及所述行为特征中的所述行为修正系数,确定所述调度优先级参数;其中,所述资源状态信息包括所述资源占用率及所述热度系数。

18、在本公开的一些实施例中,所述根据所述资源授权凭据及所述调度优先级,生成所述目标用户对应的资源调度策略,包括:

19、根据所述资源授权凭据中的可用资源及所述目标用户所需的资源消耗量,确定所述目标用户的资源授权状态;

20、根据所述资源授权状态及所述调度优先级,确定所述目标用户的资源请求对应的资源调度策略。

21、在本公开的一些实施例中,所述根据所述资源授权状态及所述调度优先级,确定所述目标用户的资源请求对应的资源调度策略,包括:

22、确定所述目标用户所执行任务所需的资源消耗量;

23、在所述资源授权状态为第一状态、且所述调度优先级大于第一预设阈值的情况下,将所述目标用户的资源请求分配至第一云服务节点;

24、在所述资源授权状态为第二状态、和/或所述调度优先级小于第二预设阈值的情况下,对所述目标用户的资源请求执行限流,或分配至第二云服务节点;其中,所述第一状态为所述资源授权凭据中的可用资源大于或等于所述目标用户所执行任务所需的资源消耗量的状态,所述第二状态为所述资源授权凭据中的可用资源小于所述目标用户所执行任务所需的资源消耗量的状态,所述第一云服务节点的性能高于所述第二云服务节点,所述第一预设阈值大于所述第二预设阈值。

25、在本公开的一些实施例中,在所述根据所述资源授权凭据及所述调度优先级,生成所述目标用户对应的资源调度策略之后,所述方法还包括:

26、执行所述资源调度策略,并存储执行过程中的用户行为数据、资源分配数据及调度结果数据;

27、根据存储的所述用户行为数据、所述资源分配数据及所述调度结果数据,更新所述调度优先级参数的确定方式和/或所述资源调度策略的生成方式。

28、在本公开的一些实施例中,所述方法还包括:

29、响应于所述目标用户在不同的云服务节点之间进行切换,根据所述资源授权凭据及所述调度优先级参数,在切换后的云服务节点上恢复与切换前的云服务节点相同的资源配置。

30、根据本公开的第二方面实施例,提供了一种资源调度装置,包括:

31、获取单元,用于获取用户标识,并获取与所述用户标识绑定的资源授权凭据;其中,所述资源授权凭据用于指示所述用户标识对应的目标用户在各个云服务节点的可用资源;

32、确定单元,用于根据所述目标用户的行为特征及所述各个云服务节点的资源状态信息,确定所述目标用户针对所述各个云服务节点的调度优先级;

33、生成单元,用于根据所述资源授权凭据及所述调度优先级,生成所述目标用户对应的资源调度策略。

34、在本公开的一些实施例中,所述装置还用于:

35、在所述获取单元获取用户标识之前,确定所述目标用户所使用的目标设备的资源计量参数;其中,所述资源计量参数基于所述目标设备的性能参数、使用时长以及任务类型确定,所述性能参数用于指示所述目标设备相对于基准设备的性能,所述任务类型用于指示所执行的任务对计算资源的消耗程度;

36、生成所述目标用户对应的所述用户标识,并配置所述用户标识绑定的所述资源授权凭据;其中,所述资源授权凭据中的可用资源基于所述资源计量参数确定。

37、在本公开的一些实施例中,所述装置还用于:

38、在所述获取单元获取用户标识,并获取与所述用户标识绑定的资源授权凭据之后,在所述目标设备为单台的情况下,根据所述目标设备的所述性能参数、所述使用时长、所述任务类型、并行任务数、最大并行容量及负载系数,确定所述目标用户所执行任务对应的资源消耗量,并从所述资源授权凭据中去除所述资源消耗量;

39、在确定所述目标设备为至少两台且所述目标用户所执行任务为至少两个任务的情况下,根据所述目标设备的所述性能参数、所述使用时长、所述任务类型及资源冲突修正量,确定所述目标用户所执行任务对应的资源消耗总量,并从所述资源授权凭据中去除所述资源消耗总量;其中,所述资源冲突修正量用于反映至少两台目标设备运行时因资源争用及通信损耗导致的额外资源消耗。

40、在本公开的一些实施例中,所述装置还用于:

41、在所述确定单元根据所述目标用户的行为特征及所述各个云服务节点的资源状态信息,确定所述目标用户针对所述各个云服务节点的调度优先级之前,获取所述目标用户的历史行为数据及实时行为数据;

42、对所述历史行为数据及所述实时行为数据进行加权融合处理,生成综合行为特征向量;

43、将所述综合行为特征向量输入至预先训练的分类预测网络模型,确定所述目标用户的行为标签及行为修正系数;其中,所述行为特征包括所述行为标签及所述行为修正系数,所述行为标签用于所述目标用户的活跃时段特征,所述行为修正系数用于调整所述调度优先级参数。

44、在本公开的一些实施例中,所述确定单元,还用于:

45、根据目标设备的资源计量参数、所述各个云服务节点的资源占用率、所述用户的资源请求热度信息确定的热度系数及所述行为特征中的所述行为修正系数,确定所述调度优先级参数;其中,所述资源状态信息包括所述资源占用率及所述热度系数。

46、在本公开的一些实施例中,所述生成单元,还用于:

47、根据所述资源授权凭据中的可用资源及所述目标用户所需的资源消耗量,确定所述目标用户的资源授权状态;

48、根据所述资源授权状态及所述调度优先级,确定所述目标用户的资源请求对应的资源调度策略。

49、在本公开的一些实施例中,所述生成单元,还用于:

50、确定所述目标用户所执行任务所需的资源消耗量;

51、在所述资源授权状态为第一状态、且所述调度优先级大于第一预设阈值的情况下,将所述目标用户的资源请求分配至第一云服务节点;

52、在所述资源授权状态为第二状态、和/或所述调度优先级小于第二预设阈值的情况下,对所述目标用户的资源请求执行限流,或分配至第二云服务节点;其中,所述第一状态为所述资源授权凭据中的可用资源大于或等于所述目标用户所执行任务所需的资源消耗量的状态,所述第二状态为所述资源授权凭据中的可用资源小于所述目标用户所执行任务所需的资源消耗量的状态,所述第一云服务节点的性能高于所述第二云服务节点,所述第一预设阈值大于所述第二预设阈值。

53、在本公开的一些实施例中,所述装置还包括:

54、执行单元,用于在所述生成单元根据所述资源授权凭据及所述调度优先级,生成所述目标用户对应的资源调度策略之后,执行所述资源调度策略,并存储执行过程中的用户行为数据、资源分配数据及调度结果数据;

55、更新单元,用于根据存储的所述用户行为数据、所述资源分配数据及所述调度结果数据,更新所述调度优先级参数的确定方式和/或所述资源调度策略的生成方式。

56、在本公开的一些实施例中,所述装置还用于:

57、响应于所述目标用户在不同的云服务节点之间进行切换,根据所述资源授权凭据及所述调度优先级参数,在切换后的云服务节点上恢复与切换前的云服务节点相同的资源配置。

58、根据本公开的第三方面实施例,提供了一种电子设备,包括:

59、至少一个处理器;以及

60、与所述至少一个处理器通信连接的存储器;其中,

61、所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述第一方面实施例所述的方法。

62、根据本公开的第四方面实施例,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行前述第一方面实施例所述的方法。

63、根据本公开的第五方面实施例,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现如前述第一方面实施例所述的方法。

64、本公开提供的资源调度方法及装置,包括:获取用户标识,并获取与用户标识绑定的资源授权凭据;其中,资源授权凭据用于指示用户标识对应的目标用户在各个云服务节点的可用资源;根据目标用户的行为特征及各个云服务节点的资源状态信息,确定目标用户针对各个云服务节点的调度优先级;根据资源授权凭据及调度优先级,生成目标用户对应的资源调度策略;可实现资源权限在多个云服务节点间的通用适配,保障用户跨节点访问时资源权限有效延续,同时结合用户行为与节点资源状态动态生成调度策略,适配资源供需的实时变化。

65、应当理解,本部分所描述的内容并非旨在标识本技术的实施例的关键或重要特征,也不用于限制本技术的范围。本技术的其它特征将通过以下的说明书而变得容易理解。