一种移动网络中业务部署方法、装置及电子设备与流程

技术特征：
1.一种移动网络中业务部署方法，其特征在于，所述方法包括：根据用户的业务需求，确定待分配业务的业务信息和业务场景；根据所述业务信息和各边缘云的状态信息，通过预设的与所述业务场景对应的业务部署模型，得到所述待分配业务的部署方案；其中，所述业务部署模型为，以预设的马尔可夫决策过程为基础，经过强化学习和与各业务场景对应的迁移学习后得到的。2.根据权利1所述的方法，其特征在于，所述方法还包括：构建所述马尔可夫决策过程；根据所述马尔可夫决策过程，以深度q学习为基础，采用深度强化学习，得到源模型；以所述源模型为基础，采用与各业务场景对应的迁移学习，得到与各业务场景对应的业务部署模型。3.根据权利要求2所述的方法，其特征在于，所述以所述源模型为基础，采用与各业务场景对应的迁移学习，得到与各业务场景对应的业务部署模型，包括：以迁移学习模型为基础，冻结所述原模型中除最后预设层数外的所有层，并在最后添加线性层，采用与各业务场景对应的迁移学习对添加的线性层进行训练，得到与各业务场景对应的业务部署模型。4.根据权利要求1或2所述的方法，其特征在于，所述马尔可夫决策过程包括：状态空间s、动作空间a和奖励函数r；其中，所述状态空间s包括各网络状态，所述网络状态包括：业务信息和各边缘云的状态信息，所述动作空间a包括根据所述网络状态确定的业务部署方案，所述奖励函数r为根据所述业务部署方案进行业务部署后产生的时延成本和部署成本得到。5.根据权利要求4所述的方法，其特征在于，所述奖励函数表示如下：r＝
‑
(αr
i
βc
i
)其中，r
i
为对业务i进行业务部署后产生的时延成本，c
i
为对业务i进行业务部署后产生的部署成本，α和β为预设的比例系数。6.根据权利要求4所述的方法，其特征在于，所述根据所述网络状态确定的业务部署方案要满足以下部署条件：所述待分配业务所占用的资源满足所部署的边缘云的剩余资源；所述业务部署方案产生的部署成本满足所述业务提供商的成本阈值。7.一种移动网络中业务部署装置，其特征在于，所述装置包括：获取模块，用于根据用户的业务需求，确定待分配业务的业务信息和业务场景；执行模块，用于根据所述业务信息和各边缘云的状态信息，通过预设的与所述业务场景对应的业务部署模型，得到所述待分配业务的部署方案；其中，所述业务部署模型为，以预设的马尔可夫决策过程为基础，经过强化学习和与各业务场景对应的迁移学习后得到的。8.根据权利7所述的装置，其特征在于，所述执行模块还用于：构建所述马尔可夫决策过程；根据所述马尔可夫决策过程，以深度q学习为基础，采用深度强化学习，得到源模型；以所述源模型为基础，采用与各业务场景对应的迁移学习，得到与各业务场景对应的业务部署模型。
9.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线；其中，所述处理器、所述通信接口以及所述存储器通过总线完成相互间的通信；所述存储器，用于存放计算机程序；所述处理器，用于执行所述存储器上所存放的程序，实现如权利要求1
‑
6任一项所述的移动网络中业务部署方法步骤。10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1
‑
6任一项所述的移动网络中业务部署方法步骤。

技术总结
本发明实施例提供了一种移动网络中业务部署方法、装置及电子设备，该方法包括：根据用户的业务需求，确定待分配业务的业务信息和业务场景；根据所述业务信息和各边缘云的状态信息，通过预设的与所述业务场景对应的业务部署模型，得到所述待分配业务的部署方案；其中，所述业务部署模型为，以预设的马尔可夫决策过程为基础，经过强化学习和与各业务场景对应的迁移学习后得到的。通过本发明实施例，实现了能够快速确定各业务的部署方案，并合理利用资源。源。源。


技术研发人员：刘蓓 粟欣 李文麟 赵明
受保护的技术使用者：清华大学
技术研发日：2021.07.27
技术公布日：2021/12/2