资源调度方法、装置及电子设备与流程

技术特征：
1.一种资源调度方法，其特征在于，所述方法由资源调度系统执行，所述方法包括：周期性的获取所有大数据组件中每一个大数据组件分别对应的持久内存pmem资源的使用情况；当接收到第一大数据组件发送的资源调度分配请求后，根据当前周期已获取的除所述第一大数据组件之外的每一个大数据组件对应的pmem资源的使用情况，确定可分配的pmem资源；将所述可分配的pmem资源，分配给所述第一大数据组件对应的任务队列，用以执行待执行的任务，其中，所述第一大数据组件为所有大数据组件中的任一个大数据组件。2.根据权利要求1所述的方法，其特征在于，所述将所述可分配的pmem资源，分配给所述第一大数据组件对应的任务队列，用以执行所述待执行的任务后，所述方法还包括：当确定所述第一大数据组件对应的任务队列执行完所述待执行的任务后，回收所述可分配的pmem资源，并分配至所述可分配的pmem资源原属的大数据组件对应的任务队列。3.根据权利要求1所述的方法，其特征在于，当根据当前周期已获取的除所述第一大数据组件之外的每一个大数据组件对应的pmem资源的使用情况，确定无可分配的pmem资源时，所述方法还包括：暂停对所述第一大数据组件对应的任务队列分配pmem资源；待下一周期获取所有大数据组件中每一个大数据组件分别对应的pmem资源的使用情况后，确定可分配的pmem资源；并将所述可分配的pmem资源分配至所述第一大数据组件对应的任务队列。4.根据权利要求1-3任一项所述的方法，其特征在于，所述资源调度分配请求中包括待分配的pmem资源；当确定所述可分配的pmem资源小于所述待分配的pmem资源时，将所述可分配的pmem资源分配至所述述第一大数据组件对应的任务队列后，所述方法还包括：确定所述可分配的pmem资源与所述待分配的pmem资源之间的资源量差值；下发第一控制指令至所述第一大数据组件，所述第一控制指令用以指示所述第一大数据组件将与所述资源量差值对应的待执行的任务在与所述第一大数据组件对应的实际内存中执行。5.根据权利要求3所述的方法，其特征在于，当超过预设周期后，依然没有可分配的pmem资源时，所述方法还包括：下发第二控制指令至所述第一大数据组件，所述第二控制指令用以指示所述第一大数据组件，将所述任务队列中待执行的任务在与所述第一大数据组件对应的实际内存中执行。6.根据权利要求1-3任一项所述的方法，其特征在于，所述根据当前周期已获取的除所述第一大数据组件之外的每一个大数据组件对应的pmem资源的使用情况，确定可分配的pmem资源之前，所述方法还包括：确定所述第一大数据组件的类型；当确定所述第一大数据组件的类型为第一预设类型时，不再为所述第一大数据组件确定可分配的pmem资源；并下发第三控制指令至所述第一大数据组件，其中，所述第三控制指令，用以指示所述
第一大数据组件，将所述任务队列中待执行的任务在与所述第一大数据组件对应的实际内存中执行。7.根据权利要求1-3任一项所述的方法，其特征在于，所述根据当前周期已获取的除所述第一大数据组件之外的每一个大数据组件对应的pmem资源的使用情况，确定可分配的pmem资源之前，所述方法还包括：确定每一个所述大数据组件的类型，以便当确定第二大数据组件的类型为第二预设类型时，不再统计所述第二大数据组件可分配的pmem资源。8.一种资源调度装置，其特征在于，所述装置包括：获取模块，用于周期性的获取所有大数据组件中每一个大数据组件分别对应的持久内存pmem资源的使用情况，以及接收每一个大数据组件发送的资源调度分配请求；处理模块，用于当接收到第一大数据组件发送的资源调度分配请求后，根据当前周期已获取的除所述第一大数据组件之外的每一个大数据组件对应的pmem资源的使用情况，确定可分配的pmem资源；分配模块，用于将所述可分配的pmem资源，分配给所述第一大数据组件对应的任务队列，用以执行待执行的任务，其中，所述第一大数据组件为所有大数据组件中的任一个大数据组件。9.一种电子设备，其特征在于，所述电子设备承载所述资源调度系统，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1-7任一项所述的资源调度方法的步骤。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-7任一项所述的资源调度方法的步骤。

技术总结
本发明实施例涉及一种资源调度方法、装置及电子设备，该方法包括：周期性的获取所有大数据组件中每一个大数据组件分别对应的PMEM资源的使用情况；当接收到第一大数据组件发送的资源调度分配请求后，根据当前周期已获取的除第一大数据组件之外的每一个大数据组件对应的PMEM资源的使用情况，确定可分配的PMEM资源；将可分配的PMEM资源，分配给第一大数据组件对应的任务队列，用以执行待执行的任务。通过该方式，可以尽量的保证每一个大数据组件在执行任务时，都有合理的资源以支持任务的执行。当某些大数据组件的资源不足时，也可以通过资源调度系统灵活调度其他大数据组件预配置的PMEM资源，用以资源不足的大数据组件使用，实现对所有PMEM资源的合理分配。实现对所有PMEM资源的合理分配。实现对所有PMEM资源的合理分配。


技术研发人员：宋文豪
受保护的技术使用者：苏州浪潮智能科技有限公司
技术研发日：2022.02.11
技术公布日：2022/5/17