虚拟现实场景的切换方法、装置、电子设备及存储介质与流程
本公开涉及虚拟现实技术,尤其是一种虚拟现实场景的切换方法、装置、电子设备及存储介质。
背景技术:
1、在虚拟现实(virtual reality,vr)全景场景浏览应用程序中,用户经常需要在不同的点位之间进行切换浏览,例如通过vr全景图浏览房屋内部空间时,可以点击不同房间中的点位以浏览各个房间的布局。
2、相关技术在进行vr场景切换时,主要采用全景图像直接切换的方式进行展示。具体的,通过图像混合、淡入淡出等方式实现。虽然能够完成vr场景的切换,但其过渡时缺乏贴近真实的空间移动感和运动连续性,使得vr体验感较差。
技术实现思路
1、本公开实施例提供一种虚拟现实场景的切换方法、装置、电子设备及存储介质,可以提升虚拟现实漫游的真实感。
2、本公开实施例的一个方面,提供一种虚拟现实场景的切换方法,包括:
3、响应于场景切换操作,确定场景切换起点和场景切换终点;
4、基于所述场景切换起点对应的第一全景图获取第一视角图像,基于所述场景切换终点对应的第二全景图获取第二视角图像;
5、以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频;
6、播放所述场景过渡视频,并在所述场景过渡视频播放结束后,显示所述第二全景图。
7、可选的,所述基于所述场景切换起点对应的第一全景图获取第一视角图像,基于所述场景切换终点对应的第二全景图获取第二视角图像,包括:
8、获取所述场景切换起点对应的起点视角参数和所述场景切换终点对应的终点视角参数,其中,视角参数包括相机位姿和垂直视场角;
9、基于所述起点视角参数渲染所述第一全景图,得到所述第一视角图像,并基于所述终点视角参数渲染所述第二全景图,得到所述第二视角图像。
10、可选的,所述以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频,包括:
11、基于所述场景切换起点的相机位姿和所述场景切换终点的相机位姿确定目标移动距离;
12、基于移动距离与移动速度之间的预设映射关系,确定所述目标移动距离对应的目标移动速度;
13、基于所述目标移动距离和所述目标移动速度确定目标视频时长;
14、将所述第一视角图像和所述第二视角图像输入所述视频生成模型,通过所述视频生成模型生成所述目标视频时长的所述场景过渡视频。
15、可选的,所述播放所述场景过渡视频,包括:
16、响应于所述场景过渡视频的画面尺寸小于屏幕尺寸,基于所述目标视频时长、当前播放时长和所述目标移动距离,确定当前点位;
17、基于所述当前点位生成过渡全景图,所述过渡全景图的尺寸与所述屏幕尺寸一致;
18、以所述过渡全景图为全局背景,在所述过渡全景图上叠加显示并播放所述场景过渡视频,并在所述场景过渡视频以外的显示区域叠加显示预设模糊效果。
19、可选的,所述基于所述当前点位生成过渡全景图,包括:
20、基于所述当前点位确定当前视角参数;
21、基于所述当前视角参数和所述屏幕尺寸,确定屏幕各像素点对应的朝向,所述朝向是从所述当前点位出发,通过像素点指向虚拟三维空间的方向;
22、基于各像素点对应的所述朝向,分别确定各像素点对应的第一像素点和第二像素点,所述第一像素点是在所述场景切换起点按照所述朝向观测所述第一全景图得到的像素点,所述第二像素点是在所述场景切换终点按照所述朝向观测所述第二全景图得到的像素点;
23、对每一对所述第一像素点和所述第二像素点进行像素值插值计算,生成所述过渡全景图,所述第一像素点与所述第二像素点的像素权重的比值等于第一距离与第二距离的比值,所述第一距离为所述当前点位至所述场景切换起点的距离,所述第二距离为所述当前点位至所述场景切换终点的距离。
24、可选的,所述以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频,包括:
25、将所述第一视角图像、所述第二视角图像和所述垂直视场角输入所述视频生成模型,通过所述视频生成模型生成以所述第一视角图像为所述起始视频帧,以所述第二视角图像为所述结束视频帧,且垂直视场角不变的所述场景过渡视频;
26、所述播放所述场景过渡视频,包括:
27、以屏幕高度为视频显示高度,对所述场景过渡视频进行缩放处理;
28、播放缩放处理处理后的所述场景过渡视频。
29、可选的,所述播放所述场景过渡视频,包括:
30、响应于视频播放进度达到预设进度,基于所述视频播放进度、所述起点视角参数和所述终点视角参数进行插值计算,调整虚拟相机对应的视角参数,以使所述场景过渡视频播放结束时,所述虚拟相机对应的视角参数与所述终点视角参数一致。
31、本公开实施例的另一方面,提供一种虚拟现实场景的切换装置,包括:
32、确定模块,用于响应于场景切换操作,确定场景切换起点和场景切换终点;
33、获取模块,用于基于所述场景切换起点对应的第一全景图获取第一视角图像,基于所述场景切换终点对应的第二全景图获取第二视角图像;
34、生成模块,用于以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频;
35、显示模块,用于播放所述场景过渡视频,并在所述场景过渡视频播放结束后,显示所述第二全景图。
36、本公开实施例的另一方面,提供一种电子设备,包括:
37、存储器,用于存储计算机程序;
38、处理器,用于执行所述存储器中存储的计算机程序,且所述计算机程序被执行时,实现上述方面所述的方法。
39、本公开实施例的另一方面,提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时,实现上述方面所述的方法。
40、本公开实施例的另一方面,提供一种计算机程序产品,包括计算机程序指令,所述计算机程序指令被处理器执行时实现上述方面所述的方法。
41、基于本公开实施例,通过获取场景切换起点对应的第一视角图像和场景切换终点对应的第二视角图像,利用视频生成模型生成场景过渡视频,在视频播放结束后显示场景切换终点对应的第二全景图,在vr全景图切换的过程中实现了具有真实空间运动感的场景过渡,使得用户在视觉上能够感受到从起点到终点的平滑移动过程,避免了传统淡入淡出式场景切换的瞬移效果,提升了虚拟现实漫游的真实感。
42、下面通过附图和实施例,对本公开的技术方案做进一步的详细描述。
1.一种虚拟现实场景的切换方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述基于所述场景切换起点对应的第一全景图获取第一视角图像,基于所述场景切换终点对应的第二全景图获取第二视角图像,包括:
3.根据权利要求2所述的方法,其特征在于,所述以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频,包括:
4.根据权利要求3所述的方法,其特征在于,所述播放所述场景过渡视频,包括:
5.根据权利要求4所述的方法,其特征在于,所述基于所述当前点位生成过渡全景图,包括:
6.根据权利要求2至5任一所述的方法,其特征在于,所述以所述第一视角图像为起始视频帧,以所述第二视角图像为结束视频帧,通过视频生成模型生成场景过渡视频,包括:
7.根据权利要求2至5任一所述的方法,其特征在于,所述播放所述场景过渡视频,包括:
8.一种虚拟现实场景的切换装置,其特征在于,包括:
9.一种电子设备,包括:
10.一种计算机可读存储介质,所述存储介质存储有计算机程序,所述计算机程序被执行时,用于实现上述权利要求1-7任一所述的方法。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com