一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

模型控制方法、装置、设备及存储介质与流程

2022-07-16 11:55:38 来源:中国专利 TAG:

技术特征:
1.一种模型控制方法,其特征在于,包括:获取待处理的图像帧集合,其中,所述图像帧集合中的图像帧具有先后时序关系,且所述图像帧包括参与任务的至少一个第一目标对象;确定所述至少一个第一目标对象和执行所述任务的至少一个受控模型之间的匹配关系;识别所述待处理的图像帧集合的至少两帧图像帧,得到第一识别结果,所述第一识别结果中至少包括每一所述第一目标对象的第一运动参数;基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务。2.根据权利要求1所述的方法,其特征在于,所述受控模型包括显示设备中的虚拟对象,所述基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务,包括:基于所述匹配关系和每一所述第一目标对象的所述第一运动参数,确定与每一所述第一目标对象匹配的所述虚拟对象的第二运动参数;控制所述虚拟对象按照所述第二运动参数完成所述任务。3.根据权利要求1或2所述的方法,其特征在于,所述识别所述待处理的图像帧集合的至少两帧图像帧,得到第一识别结果,包括:识别所述待处理的图像帧集合的至少两帧图像帧,得到第二识别结果,其中,所述第二识别结果包括候选对象的检测结果;获取实际参与任务的对象的数量;基于所述候选对象的检测结果,在所述候选对象中筛选出具有所述数量的所述第一目标对象;基于所述筛选出的具有所述数量的第一目标对象的第二识别结果,确定各第一目标对象的第一运动参数。4.根据权利要求3所述的方法,其特征在于,所述检测结果包括所述候选对象的检测框的位置信息,所述基于所述候选对象的检测结果,在所述候选对象中筛选出具有所述数量的所述第一目标对象,包括:确定所述候选对象的检测框的尺寸;基于所述候选对象的检测框的尺寸,在所述候选对象中筛选出具有所述数量的所述第一目标对象。5.根据权利要求3所述的方法,其特征在于,所述检测结果包括所述候选对象的骨骼关键点的位置信息,所述基于所述候选对象的检测结果,在所述候选对象中筛选出具有所述数量的所述第一目标对象,包括:确定所述候选对象的骨骼关键点的完整度;基于所述候选对象的骨骼关键点的完整度,在所述候选对象中筛选出具有所述数量的所述第一目标对象。6.根据权利要求3至5任一项所述的方法,其特征在于,所述第一运动参数包括第一速度参数和/或第一方向参数,所述基于所述筛选出的具有所述数量的第一目标对象的第二识别结果,确定各第一目标对象的第一运动参数,包括:
基于所述筛选出的具有所述数量的第一目标对象的第二识别结果,确定至少一个所述第一目标对象的动作是否为目标动作;响应于所述至少一个所述第一目标对象的动作为目标动作,确定所述目标动作的第一速度参数和/或第一方向参数;所述方法还包括:基于所述匹配关系和每一所述第一目标对象的第一速度参数和/或第一方向参数,确定与每一所述第一目标对象匹配的受控模型的第二速度参数和/或第二方向参数。7.根据权利要求6所述的方法,其特征在于,所述基于所述筛选出的具有所述数量的第一目标对象的第二识别结果,确定至少一个所述第一目标对象的动作是否为目标动作,包括:基于所述筛选出的具有所述数量的第一目标对象的第二识别结果,确定与所述至少一个所述第一目标对象关联的关键点的位置信息;基于所述第二识别结果所在图像帧的先后时序关系和所述关键点的位置信息,确定所述关键点的轨迹信息;响应于所述关键点的轨迹信息满足预设条件,确定所述至少一个所述第一目标对象的动作为目标动作。8.根据权利要求1至7任一项所述的方法,其特征在于,在至少两个第一目标对象匹配一个受控模型的情况下,所述识别结果还包括所述至少两个第一目标对象的动作幅度,所述基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务,包括:确定所述至少两个第一目标对象的动作幅度是否一致;响应于所述至少两个第一目标对象的动作幅度不一致,对与所述至少两个第一目标对象匹配的受控模型不输出控制指令。9.根据权利要求1至7任一项所述的方法,其特征在于,在至少两个第一目标对象匹配一个受控模型的情况下,所述基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务,包括:基于所述至少两个第一目标对象中的每一所述第一目标对象的第一运动参数,在所述至少两个第一目标对象中确定第二目标对象;基于所述匹配关系,控制与所述至少两个第一目标对象匹配的受控模型,按照与所述第二目标对象的第一运动参数匹配的第二运动参数完成所述任务。10.根据权利要求1至8任一项所述的方法,其特征在于,所述方法还包括:获取所述受控模型完成所述任务的第一时长;基于所述匹配关系,从第一历史记录集合中确定所述受控模型的第二历史记录集合;基于所述第二历史记录集合和所述第一时长,对所述受控模型进行排名。11.根据权利要求1至8任一项所述的方法,其特征在于,在所述受控模型的数量为至少两个的情况下,所述方法还包括:获取每一所述受控模型完成所述任务的第二时长;基于每一所述第二时长,对所述至少两个受控模型进行排名。12.一种模型控制装置,其特征在于,包括:
第一获取模块,用于获取待处理的图像帧集合,其中,所述图像帧集合中的图像帧具有先后时序关系,且所述图像帧包括参与任务的至少一个第一目标对象;第一确定模块,用于确定所述至少一个第一目标对象和执行所述任务的至少一个受控模型之间的匹配关系;识别模块,用于识别所述待处理的图像帧集合的至少两帧图像帧,得到第一识别结果,所述第一识别结果中至少包括每一所述第一目标对象的第一运动参数;控制模块,用于基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务。13.一种电子设备,包括存储器和处理器,所述存储器存储有可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现权利要求1至11任一项所述方法中的步骤。14.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现权利要求1至11任一项所述方法中的步骤。

技术总结
本申请实施例公开了一种模型控制方法、装置、设备及存储介质,其中,所述方法包括:获取待处理的图像帧集合,其中,所述图像帧集合中的图像帧具有先后时序关系,且所述图像帧包括参与任务的至少一个第一目标对象;确定所述至少一个第一目标对象和执行所述任务的至少一个受控模型之间的匹配关系;识别所述待处理的图像帧集合的至少两帧图像帧,得到第一识别结果,所述第一识别结果中至少包括每一所述第一目标对象的第一运动参数;基于所述匹配关系,控制与每一所述第一目标对象匹配的受控模型,按照与所述第一运动参数匹配的第二运动参数完成所述任务。完成所述任务。完成所述任务。


技术研发人员:夏俊 蔡文晖
受保护的技术使用者:深圳市商汤科技有限公司
技术研发日:2022.03.31
技术公布日:2022/7/15
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献