图像对齐方法、电子设备、计算机存储介质和计算机程序产品与流程
本申请实施例涉及计算机,尤其涉及一种图像对齐方法、电子设备、计算机存储介质和计算机程序产品。
背景技术:
1、虚拟拍摄技术广泛应用于影视、游戏、广告等领域。以影视领域为例,主要过程包括:将实时渲染的场景图投屏到led(light emitting diode,发光二极管)等显示屏幕上,然后演员利用显示屏幕作为背景进行表演,从而将真实演员置身于虚拟场景中,拍摄设备(如摄像机、相机)同时拍摄演员和显示屏幕,以获得虚实融合的画面,从而达到在影棚内拍摄外景或科幻背景的效果。在拍摄过程中,为了解决相机旋转导致取景范围超出了led屏幕的物理边界带来的穿帮问题,可以采用ar(augmented reality,增强现实)扩展技术,使得超出led屏幕的物理边界外的取景区域被虚拟场景所覆盖。
2、然而,目前的ar扩展技术中,相机拍摄到的led屏幕呈现的虚拟场景和超出led屏幕的物理边界外的取景区域中的虚拟场景在拼接处难以较好地对齐,导致相机拍摄到的led实景跨越边界时出现断层或重影,从而导致虚实融合效果较差。
技术实现思路
1、有鉴于此,本申请实施例提供一种图像对齐方法,以至少部分解决上述问题。
2、根据本申请实施例的第一方面,提供了一种图像对齐方法,包括:
3、获取相机拍摄的基础图像;所述基础图像包括第一区域和第二区域;所述第一区域中显示所述相机对屏幕呈现的第一虚拟场景进行拍摄得到的图像内容,所述第二区域显示所述相机对超出所述屏幕的物理边界的空间中的真实场景进行拍摄得到的图像内容;所述基础图像的第一区域中包含参考对象;检测所述参考对象在所述基础图像中的第一图像位置;根据所述相机的相机参数和所述屏幕对应的屏幕模型,计算所述参考对象处于所述相机的视场范围内的第二图像位置;根据所述第一图像位置和所述第二图像位置之间的偏差,调整原始渲染图像,得到与所述基础图像对齐的目标渲染图像;所述目标渲染图像用于叠加在所述基础图像上,以使叠加后图像中显示屏幕呈现的第一虚拟场景和第二虚拟场景,第二虚拟场景为目标渲染图像中未呈现至屏幕上的虚拟场景。
4、根据本申请实施例的第二方面,提供了一种图像对齐装置,包括:
5、获取模块,用于获取相机拍摄的基础图像;所述基础图像包括第一区域和第二区域;所述第一区域中显示所述相机对屏幕呈现的第一虚拟场景进行拍摄得到的图像内容,所述第二区域显示所述相机对超出所述屏幕的物理边界的空间中的真实场景进行拍摄得到的图像内容;检测模块,用于检测所述参考对象在所述基础图像中的第一图像位置;计算模块,用于根据所述相机的相机参数和所述屏幕对应的屏幕模型,计算所述参考对象处于所述相机的视场范围内的第二图像位置;调整模块,用于根据所述第一图像位置和所述第二图像位置,调整原始渲染图像,得到与所述基础图像对齐的目标渲染图像;所述目标渲染图像用于叠加在所述基础图像上,以使叠加后图像显示屏幕呈现的第一虚拟场景和第二虚拟场景,第二虚拟场景为目标渲染图像中未呈现至屏幕上的虚拟场景。
6、根据本申请实施例的第三方面,提供了一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如上述第一方面所述方法对应的操作。
7、根据本申请实施例的第四方面,提供了一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述第一方面提供的方法。
8、根据本申请实施例的第五方面,提供了一种计算机程序产品,包括计算机指令,该计算机指令指示计算设备执行如上述第一方面提供的方法。
9、根据本申请实施例提供的图像对齐方法,获取包括参考对象的基础图像;检测参考对象在基础图像中的第一图像位置;根据相机的相机参数和屏幕对应的屏幕模型,确定参考对象处于相机的视场范围内的第二图像位置;根据第一图像位置和第二图像位置,调整原始渲染图像,得到与基础图像对齐的目标渲染图像。
10、本申请上述实施例中,在虚拟拍摄过程中引入参考对象;进而根据该参考对象在基础图像中的实际显示位置和其在相机视场范围内的理论显示位置,动态调整原始渲染图像,使得到的目标渲染图像带有与基础图像一致的相关误差因素的影响,从而实现目标渲染图像和基础图像的匹配。上述过程以参考对象在相机视场范围内的实际显示位置和理论显示位置之间的差异作为视觉反馈,对原始渲染图像进行形变得到目标渲染图像,实现了虚拟拍摄过程中实时对齐目标渲染图像和基础图像的优化目标,显著提升虚实拼接处的视觉连续性。
1.一种图像对齐方法,包括:
2.根据权利要求1所述的方法,其中,所述根据所述第一图像位置和所述第二图像位置,调整原始渲染图像,得到目标渲染图像,包括:
3.根据权利要求2所述的方法,其中,所述确定所述图像网格中各顶点对应的纹理坐标,包括:
4.根据权利要求1-3任一项所述的方法,其中,所述屏幕模型包括多个单元网格;一个所述单元网格对应所述屏幕中的一个屏幕箱体;所述根据所述相机的相机参数和所述屏幕对应的屏幕模型,计算所述参考对象处于所述相机的视场范围内的第二图像位置,包括:
5.根据权利要求1-3任一项所述的方法,其中,所述检测所述参考对象在所述基础图像中的第一图像位置,包括:
6.根据权利要求5所述的方法,其中,根据所述像素坐标,确定所述参考对象在所述基础图像中的第一图像位置,包括:
7.根据权利要求1至3任意一项所述的方法,其中,在所述获取相机拍摄的基础图像之前,包括:
8.一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
9.一种计算机存储介质,其上存储有计算机程序,该程序被处理器执行时实现如权利要求1-7中任一项所述的方法。
10.一种计算机程序产品,包括计算机指令,所述计算机指令指示计算设备执行如权利要求1-7中任一项所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com