基于多目摄像机的交互方法、设备以及存储介质与流程

摘要: 本申请涉及人机交互,特别是涉及一种基于多目摄像机的交互方法、设备以及存储介质。背景技术:1、随着物联网技术的快速发展,许多场景中部署了摄像机,可采集环境的视频图...
基于多目摄像机的交互方法、设备以及存储介质与流程

本申请涉及人机交互,特别是涉及一种基于多目摄像机的交互方法、设备以及存储介质。

背景技术:

1、随着物联网技术的快速发展,许多场景中部署了摄像机,可采集环境的视频图像等数据并进行目标检测。目前,常见的摄像机已普遍配备了至少两个摄像头。例如,一些双目摄像机的构型通常为一个固定摄像头与一个可转动的云台摄像头。

2、为获得更大范围的采集视野,通常需用户手动调整云台摄像头的采集方向,使其视场与固定摄像头的视场合理邻接,以消除两者视场间过多的视场重叠,还可避免产生视野盲区。

3、但现有方案中,用户在调整云台视野时,不仅需反复比对两个摄像头分别采集的画面,还需对云台摄像头进行多次试探性调整。由此导致操作难度提升,不便于对云台摄像头进行调整。

技术实现思路

1、本申请至少提供一种基于多目摄像机的交互方法、装置、设备以及计算机可读存储介质。

2、本申请第一方面提供了一种基于多目摄像机的交互方法,所述多目摄像机至少包括一云台摄像头和一固定摄像头,所述方法包括:获取所述云台摄像头采集到的第一画面和所述固定摄像头采集到的第二画面;响应于接收到对所述云台摄像头的视野调整指令,获取所述第二画面的视野边界信息;将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,所述参考边界标识用于引导对所述云台摄像头进行调整。

3、在一实施例中,所述将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,包括:获取所述固定摄像头与所述云台摄像头之间的映射矩阵;根据所述映射矩阵将所述视野边界信息映射至所述第一画面,得到所述参考边界标识。

4、在一实施例中,所述获取所述固定摄像头与所述云台摄像头之间的映射矩阵,包括:获取所述云台摄像头的第一姿态信息和第一内参信息,以及获取所述固定摄像头的第二姿态信息和第二内参信息;根据所述云台摄像头与所述固定摄像头之间预先标定的相对外参、所述第一姿态信息、所述第一内参信息、所述第二姿态信息以及所述第二内参信息,确定所述映射矩阵。

5、在一实施例中,所述获取所述云台摄像头的第一姿态信息和第一内参信息,包括:读取所述云台摄像头的俯仰角信息、水平角信息以及变焦倍率信息;根据所述俯仰角信息和所述水平角信息确定所述第一姿态信息;根据所述云台摄像头预标定的基准内参信息和所述变焦倍率信息确定所述第一内参信息。

6、在一实施例中,所述获取所述固定摄像头与所述云台摄像头之间的映射矩阵,包括:获取所述多目摄像机的供电模式,所述供电模式包括高功率供电模式和低功率供电模式;若所述供电模式为所述高功率供电模式,则根据预设的高频策略计算所述固定摄像头与所述云台摄像头之间的单应性矩阵,得到所述映射矩阵;若所述供电模式为所述低功率供电模式,则根据预设的低频策略计算所述固定摄像头与所述云台摄像头之间的单应性矩阵,得到所述映射矩阵;其中,所述高频策略中对所述单应性矩阵的第一计算频率大于所述低频策略中对所述单应性矩阵的第二计算频率。

7、在一实施例中,所述获取所述第二画面的视野边界信息,包括:获取所述第二画面对应的视场角信息;根据所述视场角信息,在所述第二画面对应的成像平面中进行边界点采样处理,得到所述视野边界信息。

8、在一实施例中,所述根据所述视场角信息,在所述第二画面对应的成像平面中进行边界点采样处理,得到所述视野边界信息,包括:获取所述多目摄像机的供电模式,所述供电模式包括高功率供电模式和低功率供电模式;若所述供电模式为所述高功率供电模式,则根据预设的高精度策略进行边界点采样处理,得到所述视野边界信息;若所述供电模式为所述低功率供电模式,则根据预设的低精度策略进行边界点采样处理,得到所述视野边界信息;其中,所述高精度策略采样到的边界点数量大于所述低精度策略采样到的边界点数量。

9、在一实施例中,所述将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,包括:将所述视野边界信息映射至所述第一画面,得到映射点集;对所述映射点集进行渲染处理,得到所述参考边界标识。

10、本申请第二方面提供了一种基于多目摄像机的交互装置,所述多目摄像机至少包括一云台摄像头和一固定摄像头,所述装置包括:画面获取模块,用于获取所述云台摄像头采集到的第一画面和所述固定摄像头采集到的第二画面;边界获取模块,用于响应于接收到对所述云台摄像头的视野调整指令,获取所述第二画面的视野边界信息;边界映射模块,用于将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,所述参考边界标识用于引导对所述云台摄像头进行调整。

11、本申请第三方面提供了一种电子设备,包括存储器和处理器,处理器用于执行存储器中存储的程序指令,以实现上述基于多目摄像机的交互方法。

12、本申请第四方面提供了一种计算机可读存储介质,其上存储有程序指令,程序指令被处理器执行时实现上述基于多目摄像机的交互方法。

13、本申请的技术方案中,通过获取多目摄像机中云台摄像头采集到的第一画面、所述多目摄像机中固定摄像头采集到的第二画面,在接收到对所述云台摄像头的视野调整指令时,可以获取所述第二画面的视野边界信息。再将视野边界信息映射至所述第一画面,则可得到所述第一画面中的参考边界标识,该参考边界标识可用于引导对所述云台摄像头进行调整。由此能够在一个画面中观察自身采集到的画面内容与另一画面映射而来的参考边界标识,准确直观地提供云台调整过程中的参照信息,实现对交互体验的优化,也不必运行高复杂度的图像拼接算法,降低了硬件成本与云台调整功耗。

14、应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,而非限制本申请。

1.一种基于多目摄像机的交互方法,其特征在于,所述多目摄像机至少包括一云台摄像头和一固定摄像头,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,包括:

3.根据权利要求2所述的方法,其特征在于,所述获取所述固定摄像头与所述云台摄像头之间的映射矩阵,包括:

4.根据权利要求3所述的方法,其特征在于,所述获取所述云台摄像头的第一姿态信息和第一内参信息,包括:

5.根据权利要求2所述的方法,其特征在于,所述获取所述固定摄像头与所述云台摄像头之间的映射矩阵,包括:

6.根据权利要求1所述的方法,其特征在于,所述获取所述第二画面的视野边界信息,包括:

7.根据权利要求6所述的方法,其特征在于,所述根据所述视场角信息,在所述第二画面对应的成像平面中进行边界点采样处理,得到所述视野边界信息,包括:

8.根据权利要求1所述的方法,其特征在于,所述将所述视野边界信息映射至所述第一画面,得到所述第一画面中的参考边界标识,包括:

9.一种电子设备,其特征在于,包括存储器和处理器,所述处理器用于执行所述存储器中存储的程序指令,以实现权利要求1至8任一项所述的方法。

10.一种计算机可读存储介质,其上存储有程序指令,其特征在于,所述程序指令被处理器执行时实现权利要求1至8任一项所述的方法。