图像处理方法及装置与流程
本申请属于图像处理,具体涉及一种图像处理方法及装置。
背景技术:
1、目前,随着电子设备的发展,拍摄视频已经成为用户记录生活、运动、旅行等内容的重要方式。与此同时,三维重建技术的发展使用户能够以自由视角浏览、虚拟运镜、增强现实等方式获得更加沉浸式的观看体验。
2、在相关技术中,三维重建可以基于单张图像进行重建;例如,单张图像重建可以根据单张图像的图像信息,通过模型先验估计场景的几何信息,得到估计出的不同拍摄角度对应的视频帧,从而根据估计出的不同拍摄角度对应的视频帧,构建三维视频。
3、然而,由于上述方法通过单张图像进行几何估计,容易出现几何结构不准确、尺度不一致及细节缺失等问题;如此,电子设备得到三维重建视频的视频质量较差。
技术实现思路
1、本申请实施例的目的是提供一种图像处理方法及装置,能够提高电子设备进行三维重建视频的视频质量。
2、第一方面,本申请实施例提供了一种图像处理方法,该图像处理方法包括:在检测到待拍摄对象执行目标动作的情况下,通过每个云台摄像头采集图像帧,并获取与图像帧对应的三维图像重建信息;不同的云台摄像头对应不同的视场角;三维图像重建信息包括以下至少一项:云台偏移角度、惯性测量信息、云台摄像头标定参数;基于三维图像重建信息和至少两个云台摄像头采集的图像帧,生成目标动作对应的三维视频。
3、第二方面,本申请实施例提供了一种图像处理装置,该图像处理装置包括:获取模块和生成模块。获取模块,用于在检测到待拍摄对象执行目标动作的情况下,通过每个云台摄像头采集图像帧,并获取与图像帧对应的三维图像重建信息;不同的云台摄像头对应不同的视场角;三维图像重建信息包括以下至少一项:云台偏移角度、惯性测量信息、云台摄像头标定参数。生成模块,用于基于获取模块获取的三维图像重建信息和至少两个云台摄像头采集的图像帧,生成目标动作对应的三维视频。
4、第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
5、第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
6、第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
7、第六方面,本申请实施例提供一种计算机程序/程序产品,该程序/程序产品被存储在存储介质中,该程序/程序产品被至少一个处理器执行以实现如第一方面所述的方法。
8、在本申请实施例中,在检测到待拍摄对象执行目标动作的情况下,由于可以直接控制多个云台摄像头采集不同拍摄视角的图像帧并得到与不同拍摄视角的图像帧关联的三维图像重建信息,所以在进行三维视频重建时,可以得到准确的几何结构和拍摄细节,提升了电子设备得到三维重建视频的视频质量。
1.一种图像处理方法,其特征在于,由电子设备执行,所述电子设备包括至少两个云台摄像头,所述方法包括:
2.根据权利要求1所述的方法,其特征在于,所述基于所述三维图像重建信息和所述至少两个云台摄像头采集的图像帧,生成所述目标动作对应的三维视频,包括:
3.根据权利要求2所述的方法,其特征在于,所述基于所述三维图像重建信息和所述第一候选图像帧集合,生成所述三维视频,包括:
4.根据权利要求3所述的方法,其特征在于,所述基于所述三维图像重建信息和所述第二候选图像帧集合,生成所述三维视频,包括:
5.根据权利要求1所述的方法,其特征在于,所述通过每个云台摄像头采集图像帧之前,所述方法还包括:
6.一种图像处理装置,其特征在于,由电子设备执行,所述电子设备包括至少两个云台摄像头,所述装置包括:获取模块和生成模块;
7.根据权利要求6所述的装置,其特征在于,所述生成模块,具体用于基于所述每个云台摄像头对应的云台偏移角度,对所述每个云台摄像头采集的图像帧进行均匀抽帧,得到第一候选图像帧集合;
8.根据权利要求7所述的装置,其特征在于,所述生成模块,具体用于对所述第一候选图像帧集合进行图像质量校验,得到第二候选图像帧集合;
9.根据权利要求8所述的装置,其特征在于,所述生成模块,具体用于基于所述云台偏移角度、所述惯性测量信息和所述云台摄像头标定参数,确定所述每个云台摄像头的位姿信息;
10.根据权利要求6所述的装置,其特征在于,所述图像处理装置还包括处理模块;
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com