摄像机的运动控制方法、装置、设备和介质与流程

本发明涉及摄像机控制，尤其涉及一种摄像机的运动控制方法、装置、设备和介质。

背景技术：

1、在现有技术中，主流手持云台及自动跟拍设备普遍采用基于传统计算机视觉的闭环控制方案。其典型流程包括：利用kcf（核相关滤波）或检测-跟踪算法获取目标的矩形感兴趣区域，计算该区域中心与画面中心的像素偏差，并将偏差输入pid控制器以驱动云台电机，使目标保持在画面中央。该方法虽能实现基本的目标跟随，但在专业影视创作场景中存在明显局限。

2、首先，现有方案运镜逻辑单一，强制将目标锁定于画面绝对中心，无法根据主体相关信息动态调整构图偏置；同时，无法感知景别意图，难以实现具有情感表达力的运镜语言，导致画面呆板、叙事性弱。其次，其控制机制依赖实时误差反馈，缺乏前瞻性与运动平滑性。如pid控制器被动响应目标状态变化，在目标急停、折返或变速时易产生过冲、滞后或顿挫；且加减速过程呈线性突变，缺失人类摄影师所具备的起幅-落幅呼吸感与s型速度曲线，致使运镜呈现明显的机械感与电子抖动，难以满足高质量影像创作对自然、流畅、有意图运镜的需求。

技术实现思路

1、本发明提供了一种摄像机的运动控制方法、装置、设备和介质，以解决现有自动跟拍设备因缺乏场景语义理解能力而导致的运镜呆板、机械感强的问题。

2、根据本发明的一方面，提供了一种摄像机的运动控制方法，包括：

3、获取目标摄像机的感知信息，并根据感知信息生成对应的场景语义信息；

4、根据场景语义信息所指示的拍摄主体信息和画面空间布局，确定对应的目标运镜策略；

5、基于目标运镜策略，预测未来时序内的摄像机控制序列，以根据摄像机控制序列驱动目标摄像机转动。

6、根据本发明的另一方面，提供了一种摄像机的运动控制装置，包括：

7、场景理解模块，用于获取目标摄像机的感知信息，并根据感知信息生成对应的场景语义信息；

8、运镜策略确定模块，用于根据场景语义信息所指示的拍摄主体信息和画面空间布局，确定对应的目标运镜策略；

9、控制序列预测模块，用于基于目标运镜策略，预测未来时序内的摄像机控制序列，以根据摄像机控制序列驱动目标摄像机转动。

10、根据本发明的另一方面，提供了一种电子设备，电子设备包括：

11、至少一个处理器；以及

12、与至少一个处理器通信连接的存储器；其中，

13、存储器存储有可被至少一个处理器执行的计算机程序，计算机程序被至少一个处理器执行，以使至少一个处理器能够执行本发明任一实施例的摄像机的运动控制方法。

14、根据本发明的另一方面，提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令用于使处理器执行时实现本发明任一实施例的摄像机的运动控制方法。

15、根据本申请的另一方面，提供了一种计算机程序产品，计算机程序产品包括计算机程序，该计算机程序被处理器执行时实现本申请任一实施例的摄像机的运动控制方法。

16、本发明实施例的技术方案，通过对感知信息进行理解确定场景语义信息，根据场景语义信息确定匹配的目标运镜策略，再将目标运镜策略转换为摄像机控制指令，实现具有场景语义理解能力和拟人化平滑特性的自动运镜，避免了仅依赖目标坐标的机械式跟踪，实现了具有导演思维的智能运镜，显著提升视频内容的观赏性、叙事性和专业性。

17、应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种摄像机的运动控制方法，其特征在于，该方法包括：

2.根据权利要求1所述的方法，其特征在于，所述根据所述场景语义信息所指示的拍摄主体信息和画面空间布局，确定对应的目标运镜策略，包括：

3.根据权利要求2所述的方法，其特征在于，所述根据所述主体意图预测结果和拍摄意图，确定对应的目标运镜策略，包括：

4.根据权利要求1所述的方法，其特征在于，所述基于所述目标运镜策略，预测未来时序内的摄像机控制序列，包括：

5.根据权利要求1-4任一所述的方法，其特征在于，该方法还包括：

6.根据权利要求5所述的方法，其特征在于，所述根据所述第一摄像机控制序列对当前控制周期预测的对应第二未来时序的第二摄像机控制序列进行控制调整，包括：

7.根据权利要求1所述的方法，其特征在于，所述感知信息包括多模态感知信息，所述多模态感知信息至少包括图像感知信息、音频感知信息、设备姿态信息和镜头参数信息；

8.一种摄像机的运动控制装置，其特征在于，该装置包括：

9.一种电子设备，其特征在于，所述电子设备包括：

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-7中任一项所述的摄像机的运动控制方法。