图像处理方法、装置、终端设备以及可读存储介质与流程

技术特征：
1.一种图像处理方法，其特征在于，包括：确定距离目标视角预设范围内的多个真实视角，所述目标视角为无法采集真实图像的视角，所述真实视角为可采集真实图像的视角；获得从各个所述真实视角采集的图像数据；利用所述采集的图像数据合成所述目标视角的基础图像和填充图像，所述基础图像是虚拟视角图像中与所述目标视角处的实际图像相似度最高的图像，所述填充图像是所述虚拟视角图像中除所述基础图像外的其它图像，所述虚拟视角图像是利用所述采集的图像数据在所述目标视角下合成的图像；以最小化所述基础图像中的无效区域为目标，利用所述填充图像中的像素值对所述无效区域进行填充，将填充后的所述基础图像作为从所述目标视角采集的图像，所述无效区域为无像素值的区域。2.根据权利要求1所述的方法，其特征在于，利用所述采集的图像数据合成所述目标视角的基础图像和填充图像，包括：针对所述采集的图像数据中的每一帧真实图像，将各个像素点在真实视角的图像坐标系下的坐标转换为在真实视角的相机坐标系下的坐标；将在真实视角的相机坐标系下的坐标转换为在世界坐标系下的坐标；将在世界坐标系下的坐标转换为在所述目标视角的相机坐标系下的坐标；将在所述目标视角的相机坐标系下的坐标转换为在所述目标视角的图像坐标系下的坐标；根据坐标转换后得到的多帧图像获得所述目标视角的基础图像和填充图像，一帧所述真实图像用于得到一帧坐标转换后的图像。3.根据权利要求1所述的方法，其特征在于，获得从各个所述真实视角采集的图像数据，包括：获得第一图像数据和第二图像数据，所述第一图像数据与所述目标视角处的实际图像的相似度高于所述第二图像数据与所述目标视角处的实际图像的相似度；利用所述采集的图像数据合成所述目标视角的基础图像和填充图像，包括：利用所述第一图像数据合成所述目标视角的基础图像；利用所述第二图像数据合成所述目标视角的填充图像。4.根据权利要求3所述的方法，其特征在于，获得第一图像数据和第二图像数据，包括：从第一真实视角获得所述第一图像数据，所述第一真实视角为所述预设范围内距离所述目标视角最近的真实视角；从第二真实视角获得所述第二图像数据，所述第二真实视角为所述预设范围内除所述第一真实视角外的其它真实视角。5.根据权利要求1－4任一项所述的方法，其特征在于，以最小化所述基础图像中的无效区域为目标，利用所述填充图像中的像素值对所述无效区域进行填充，包括：获得所述无效区域中的任意一个像素点在各个所述填充图像中相应位置处的像素值；剔除各个像素值中的异常像素值；将剩余的各个像素值的均值确定为处理后的像素值；利用所述处理后的像素值对所述像素点进行填充；
获得所述无效区域中的所有像素点的处理后的像素值并完成填充，直至所述无效区域最小。6.根据权利要求5所述的方法，其特征在于，剔除所述各个像素值中的异常像素值，包括：获得各个所述像素值在预设颜色通道下的均值，所述预设颜色通道为r通道、g通道以及b通道中的任意一者；根据所述预设颜色通道下的均值，获得各个所述像素值在预设颜色通道下的标准差；获得所述预设颜色通道下的均值和预设数量倍所述标准差的和值；将大于所述和值的像素值确定为异常像素值，并剔除所述异常像素值。7.一种图像处理装置，其特征在于，包括：第一确定模块，用于确定距离目标视角预设范围内的多个真实视角，所述目标视角为无法采集真实图像的视角，所述真实视角为可采集真实图像的视角；获得模块，用于获得从各个所述真实视角采集的图像数据；合成模块，用于利用所述采集的图像数据合成所述目标视角的基础图像和填充图像，所述基础图像是虚拟视角图像中与所述目标视角处的实际图像相似度最高的图像，所述填充图像是所述虚拟视角图像中除所述基础图像外的其它图像，所述虚拟视角图像是利用所述采集的图像数据在所述目标视角下合成的图像；填充模块，用于以最小化所述基础图像中的无效区域为目标，利用所述填充图像中的像素值对所述无效区域进行填充，将填充后的所述基础图像作为从所述目标视角采集的图像，所述无效区域为无像素值的区域。8.根据权利要求7所述的装置，其特征在于，所述合成模块包括：第一转换子模块，用于针对所述采集的图像数据中的每一帧真实图像，将各个像素点在真实视角的图像坐标系下的坐标转换为在真实视角的相机坐标系下的坐标；第二转换子模块，用于将在真实视角的相机坐标系下的坐标转换为在世界坐标系下的坐标；第三转换子模块，用于将在世界坐标系下的坐标转换为在所述目标视角的相机坐标系下的坐标；第四转换子模块，用于将在所述目标视角的相机坐标系下的坐标转换为在所述目标视角的图像坐标系下的坐标；第一获得子模块，用于根据坐标转换后得到的多帧图像获得所述目标视角的基础图像和填充图像，一帧所述真实图像用于得到一帧坐标转换后的图像。9.一种终端设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现权利要求1至6任一所述的图像处理方法中的步骤。10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1至6中任一所述的图像处理方法中的步骤。

技术总结
本申请提供了一种图像处理方法、装置、终端设备以及可读存储介质。所述方法包括：确定距离目标视角预设范围内的多个真实视角，所述目标视角为无法采集真实图像的视角，所述真实视角为可采集真实图像的视角；获得从各个所述真实视角采集的图像数据；利用所述采集的图像数据合成所述目标视角的基础图像和填充图像；以最小化所述基础图像中的无效区域为目标，利用所述填充图像中的像素值对所述无效区域进行填充，将填充后的所述基础图像作为从所述目标视角采集的图像，所述无效区域为无像素值的区域。该方法可补全传统视角合成算法合成的虚拟视角图像存在的空洞区域，使得合成的虚拟视角图像更逼近虚拟视角处的真实图像，增强了用户的观看体验。户的观看体验。户的观看体验。


技术研发人员：刘思阳
受保护的技术使用者：北京奇艺世纪科技有限公司
技术研发日：2021.08.24
技术公布日：2021/10/23