图像处理方法、装置和电子设备与流程

技术特征：
1.一种图像处理方法，其特征在于，所述方法包括：获取原始图像；对所述原始图像增设方差图层，得到图层集，所述图层集包括所述原始图像和所述方差图层，所述方差图层包括多个像素，每个像素对应的方差值由所述原始图像对应的感光度确定；利用深度学习网络模型对所述图层集进行处理，得到第一增强图像，所述第一增强图像位于rgb颜色空间；对所述第一增强图像进行增强处理，得到第二增强图像，所述增强处理包括颜色增强处理和/或亮度增强处理。2.根据权利要求1所述的方法，其特征在于，所述原始图像包括：多帧第一图像、多帧第二图像、至少1帧第三图像中的至少一项；其中，所述第一图像、所述第二图像和所述第三图像为对相同的待拍摄场景拍摄的图像；所述多帧第一图像包括至少1帧长曝光图像和至少1帧短曝光图像，所述多帧第二图像均为正常曝光的拜耳格式图像，所述至少1帧第三图像为灰阶图像。3.根据权利要求2所述的方法，其特征在于，所述至少1帧长曝光图像均为所述拜耳格式图像或均为所述灰阶图像，所述至少1帧短曝光图像均为所述拜耳格式图像或均为所述灰阶图像。4.根据权利要求2或3所述的方法，其特征在于，在对所述原始图像增设所述方差图层之前，所述方法还包括：对所述原始图像进行第一处理；所述第一处理包括：黑电平校正。5.根据权利要求4所述的方法，其特征在于，当所述原始图像包括的所述至少1帧第三图像为多帧第三图像时，所述第一处理还包括：配准。6.根据权利要求4或5所述的方法，其特征在于，当所述原始图像包括的所述多帧第一图像均为所述拜耳格式图像时，和/或，当所述原始图像包括所述多帧第二图像时，所述第一处理还包括：自动白平衡。7.根据权利要求4至6中任一项所述的方法，其特征在于，当所述原始图像包括的所述多帧第一图像均为所述拜耳格式图像时，和/或，当所述原始图像包括所述多帧第二图像时，所述第一处理还包括：通道拆分；其中，通道拆分用于将所述拜耳格式图像拆分成多个单通道的待增强子图层，每个单通道的待增强子图层只包含一种颜色通道信号。8.根据权利要求1至7中任一项所述的方法，其特征在于，对每帧原始图像增设1帧所述方差图层。9.根据权利要求1至7中任一项所述的方法，其特征在于，当多帧所述原始图像对应的感光度均相同时，对多帧所述原始图像增设1帧所述方差图层。10.根据权利要求5至7中任一项所述的方法，其特征在于，所述方差图层包括第一方差图层、第二方差图层和第三方差图层；当所述多帧第一图像对应的感光度均相同时，对所述多帧第一图像增设1帧所述第一方差图层，所述第一方差图层中每个像素对应的方差值由任意1帧所述第一图像对应的感光度确定；
当所述多帧第二图像对应的感光度均相同时，对所述多帧第二图像增设1帧所述第二方差图层，所述第二方差图层中每个像素对应的方差值由任意1帧所述第二图像对应的感光度确定；当所述多帧第三图像对应的感光度均相同时，对所述多帧第三图像增设1帧所述第三方差图层，所述第三方差图层中每个像素对应的方差值由任意1帧所述第三图像对应的感光度确定。11.根据权利要求1至10中任一项所述的方法，其特征在于，所述方差图层中每个像素对应的方差值为：与所述方差图层对应的所述原始图像的所述感光度，或者；所述每个像素对应的方差值为：与所述方差图层对应的所述原始图像的所述感光度和预设基准值的比值，或者；所述方差图层包括多个子区域，每个子区域包括多个像素，位于不同子区域中的像素对应的方差值不同，所述位于不同子区域的像素对应的系数不同，第一子区域中的像素对应的方差值为：与所述方差图层对应的所述原始图像的所述感光度和第一系数的乘积。12.根据权利要求2、3、5中任一项所述的方法，其特征在于，所述深度学习网络模型包括：第一深度学习网络模型、第二深度学习网络模型和第三深度学习网络模型；则所述利用深度学习网络模型对图层集进行处理，得到第一增强图像，包括：当所述图层集由所述多帧第二图像得到时，利用所述第一深度学习网络模型对所述图层集进行降噪和去马赛克，得到所述第一增强图像；当所述图层集由所述多帧第二图像和所述至少1帧第三图像得到时，利用所述第二深度学习网络模型对所述图层集进行所述降噪、所述去马赛克和彩色融合，得到所述第一增强图像；当所述图层集由所述多帧第二图像和所述多帧第一图像得到时，或者；当所述图层集由所述多帧第二图像、所述多帧第一图像和所述至少1帧第三图像得到时，利用所述第三深度学习网络模型对所述图层集进行所述降噪、所述去马赛克、所述彩色融合和多曝光融合，得到第一增强图像。13.根据权利要求1至12中任一项所述的方法，其特征在于，所述对所述第一增强图像进行增强处理，得到第二增强图像，包括：利用分割模型对所述第一增强图像进行分割，得到掩膜图；根据所述第一增强图像和所述掩膜图，利用色调映射模型进行处理，得到增益系数图；所述增益系数图包括多个像素，每个像素对应一个增益值；将所述第一增强图像与所述增益系数图相乘，得到所述第二增强图像。14.根据权利要求13所述的方法，其特征在于，所述增益系数图包括3帧颜色增益系数图和/或1帧亮度增益系数图，每帧颜色增益系数图针对所述第一增强图像的单一颜色进行增强，所述亮度增益系数图用于对所述第一增强图像的亮度进行增强。15.根据权利要求2、3、5、12中任一项所述的方法，其特征在于，当所述原始图像包括所述多帧第一图像，并且，还包括所述多帧第二图像和所述至少1帧第三图像中的至少一项时，在所述利用分割模型，获取所述第一增强图像对应的掩膜图之前，所述方法还包括：利用所述多帧第一图像的所述长曝光图像和所述短曝光图像，对所述第一增强图像进行长短曝光融合处理，得到中间增强图像；
将所述中间增强图像作为所述第一增强图像。16.根据权利要求15所述的方法，其特征在于，所述利用所述长曝光图像和所述短曝光图像，对所述第一增强图像进行长短曝光融合处理，得到中间增强图像，包括：将所述第一增强图像与第一待融合图像进行融合，得到中间融合图像；将所述中间融合图像与第二待融合图像进行融合，得到所述中间增强图像；其中，所述第一待融合图像、所述第二待融合图像分别为所述长曝光图像和所述短曝光图像。17.根据权利要求1至16中任一项所述的方法，其特征在于，在得到所述第二增强图像之后，所述方法还包括：对所述第二增强图像进行色彩空间转换，得到位于yuv颜色空间的第一目标图像。18.根据权利要求17所述的方法，其特征在于，当所述原始图像包括至少1帧第三图像时，所述方法还包括：对所述至少1帧第三图像进行所述色彩空间转换，得到位于所述yuv颜色空间的第二目标图像；将所述第一目标图像和所述第二目标图像进行彩色融合，生成第三目标图像。19.一种图像处理装置，其特征在于，包括：接收接口和处理器；所述接收接口用于接收原始图像；所述处理器，用于调用存储器中存储的计算机程序，以执行如权利要求1至18任一项所述的图像处理方法。20.一种电子设备，其特征在于，包括摄像头模组、处理器和存储器；所述摄像头模组，用于获取原始图像；所述存储器，用于存储可在所述处理器上运行的计算机程序；所述处理器，用于执行如权利要求1至18中任一项所述的图像处理方法。21.根据权利要求20所述的电子设备，其特征在于，所述摄像头模组包括彩色摄像头和黑白摄像头；所述彩色摄像头和所述黑白摄像头用于对相同的待拍摄场景进行拍摄；所述彩色摄像头，用于在所述处理器获取拍照指令后，获取多帧第一图像和多帧第二图像，所述多帧第一图像至少包括1帧长曝光图像和1帧短曝光图像；所述第二图像为正常曝光的拜耳格式图像；所述黑白摄像头，用于在所述处理器获取所述拍照指令后，获取至少1帧第三图像，所述第三图像为灰阶图像。22.根据权利要求20所述的电子设备，其特征在于，所述摄像头模组包括彩色摄像头和黑白摄像头；所述彩色摄像头和所述黑白摄像头用于对相同的待拍摄场景进行拍摄；所述彩色摄像头，用于在所述处理器获取拍照指令后，获取多帧第二图像，所述第二图像为正常曝光的拜耳格式图像；所述黑白摄像头，用于在所述处理器获取所述拍照指令后，获取多帧第一图像和至少1帧第三图像，所述多帧第一图像至少包括1帧长曝光图像和1帧短曝光图像；所述第三图像为灰阶图像。23.一种芯片，其特征在于，包括：处理器，用于从存储器中调用并运行计算机程序，使得安装有所述芯片的设备执行如权利要求1至18中任一项所述的图像处理方法。
24.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时，使所述处理器执行如权利要求1至18任一项所述的图像处理方法。

技术总结
本申请提供了一种图像处理方法、装置和电子设备，涉及图像处理领域，该图像处理方法包括：获取原始图像；对原始图像增设方差图层，得到图层集；利用深度学习网络模型对图层集进行处理，得到第一增强图像；对第一增强图像进行增强处理，得到第二增强图像。在该方法中，由于增设的方差图层所包括的像素对应的方差值由原始图像对应的感光度确定，所以，通过增设方差图层，可以增加先验信息，使得后续可以根据不同噪声水平来进行不同强度的降噪，从而保留更多细节，实现提高图像的清晰度的目的。实现提高图像的清晰度的目的。实现提高图像的清晰度的目的。


技术研发人员：肖斌 周茂森 王宇 朱聪超
受保护的技术使用者：荣耀终端有限公司
技术研发日：2021.07.07
技术公布日：2023/1/13