图像处理设备和方法、图像处理系统、控制方法和介质与流程

技术特征：
1.一种图像处理设备，包括：显像单元，其被配置为对输入原始图像应用显像处理；获取单元，其被配置为获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述第一显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及生成单元，其被配置为基于所述第一结果图像和所述差分图像，通过对原始图像应用显像处理来生成第三结果图像，其中，所述第二显像处理的处理负荷比所述第一显像处理的处理负荷高。2.根据权利要求1所述的图像处理设备，还包括：显示控制单元，其被配置为控制显示单元，所述显示单元被配置为显示所述显像单元所显像的结果图像，其中，所述显示控制单元能够将显示在所述显示单元上的结果图像切换为所述第三结果图像。3.根据权利要求1所述的图像处理设备，其中，所述获取单元所获取到的差分图像被压缩，以及所述生成单元通过对压缩的差分图像进行解压缩来进行所述生成。4.根据权利要求3所述的图像处理设备，其中，压缩格式是jpeg格式和yuv格式至少之一。5.根据权利要求1所述的图像处理设备，还包括：传输单元，其被配置为将显像请求连同原始图像一起传输到用于进行所述第一显像处理和所述第二显像处理的其它设备，其中，所述获取单元通过从所述其它设备接收所述差分图像来获取所述差分图像。6.根据权利要求5所述的图像处理设备，其中，所述传输单元根据用户指令将对所述差分图像的获取请求传输到所述其它设备，以及所述获取单元通过接收所述其它设备响应于所述获取请求而传输的差分图像来获取所述差分图像。7.根据权利要求1所述的图像处理设备，其中，所述获取单元获取通过将所述差分图像划分为多个区域而获得的多个部分图像中的、差分的大小大于或等于预定阈值的部分图像连同关于该部分图像的区域信息，以及所述生成单元基于所获取到的部分图像和关于该部分图像的区域信息，通过将所述显像单元所显像的结果图像中的相应区域作为对象来进行所述生成。8.根据权利要求7所述的图像处理设备，其中，所述差分的大小是通过将所述第一结果图像和所述第二结果图像中的像素的平均绝对误差、均方误差、误差的绝对值的最大值和误差的绝对值的众数其中之一作为指标来确定的。9.根据权利要求8所述的图像处理设备，其中，所述部分图像是矩形的，并且所述部分图像的尺寸被调整为使得以更小的面积包括所述差分的大小大于或等于预定阈值的更多像素。10.根据权利要求7所述的图像处理设备，其中，
所述部分图像是表示在将该部分图像的区域根据预定颜色空间在颜色分量方向上进一步划分的情况下的差分大于或等于预定阈值的颜色分量的图像。11.根据权利要求1所述的图像处理设备，其中，所述差分图像的各个像素仅具有与所述原始图像中在自身像素中不存在的颜色分量有关的信息。12.根据权利要求1所述的图像处理设备，其中，所述原始图像是由多个帧组成的运动图像，所述显像单元以帧为单位应用所述显像处理，所述获取单元获取以帧为单位的差分图像，以帧为单位的差分图像指示以帧为单位的第一结果图像与以帧为单位的第二结果图像之间的差分，以帧为单位的第一结果图像指示通过以帧为单位应用与所述显像单元的显像处理相同的第一显像处理而获得的结果，以帧为单位的第二结果图像指示通过以帧为单位应用与所述显像单元的显像处理不同的第二显像处理而获得的结果，以及所述生成单元基于以帧为单位的差分图像来更新所述显像单元所显像的以帧为单位的图像。13.根据权利要求12所述的图像处理设备，其中，所述获取单元获取与配置所述运动图像的多个帧中的关键帧相对应的差分图像作为以帧为单位的差分图像。14.根据权利要求13所述的图像处理设备，其中，与所述关键帧相对应的差分图像以时间序列被压缩，以及所述生成单元通过对以时间序列压缩的并且与所述关键帧相对应的差分图像进行解压缩来生成所述显像单元所显像的以帧为单位的图像。15.根据权利要求1所述的图像处理设备，其中，所述显像处理至少包括去马赛克处理，所述第一显像处理中的去马赛克处理是用于通过插值方法估计与关注像素中不存在的颜色分量有关的信息的处理，以及所述第二显像处理中的去马赛克处理是使用训练后的神经网络的处理。16.一种图像处理设备，包括：显像单元，其被配置为对输入原始图像应用显像处理；存储单元，其被配置为存储指示所述显像处理的结果的结果图像；获取单元，其被配置为获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及更新单元，其被配置为将所存储的结果图像与所获取到的差分图像相关联地存储，或者通过所获取到的差分图像来更新所存储的结果图像。17.一种图像处理设备，包括：显像单元，其被配置为对输入原始图像应用第一显像处理和与所述第一显像处理不同的第二显像处理；以及生成单元，其被配置为生成差分图像，所述差分图像指示通过应用所述第一显像处理
而获得的第一结果图像与通过应用所述第二显像处理而获得的第二结果图像之间的差分。18.根据权利要求17所述的图像处理设备，还包括：存储单元，其被配置为存储所述差分图像，其中，所述生成单元响应于来自其它设备的请求，读取存储在所述存储单元中的差分图像并将该差分图像传输到所述其它设备。19.一种图像处理系统，用于对原始图像进行显像，所述图像处理系统包括：第一设备和第二设备，其中，所述第一设备包括：显像单元，其被配置为对输入原始图像应用显像处理；存储单元，其被配置为存储指示所述显像处理的结果的结果图像；获取单元，其被配置为获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及更新单元，其被配置为基于所述差分图像来更新存储在所述存储单元中的结果图像，以及所述第二设备包括：获取单元，其被配置为从所述第一设备获取原始图像；显像单元，其被配置为对所获取到的原始图像应用所述第一显像处理和所述第二显像处理；生成单元，其被配置为生成差分图像，所述差分图像指示通过应用所述第一显像处理而获得的第一结果图像与通过应用所述第二显像处理而获得的第二结果图像之间的差分；以及传输单元，其被配置为将所生成的差分图像传输到所述第一设备。20.一种图像处理方法，包括以下步骤：对输入原始图像应用显像处理；获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述第一显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及基于所述第一结果图像和所述差分图像，通过对输入原始图像应用显像处理来生成第三结果图像，其中，所述第二显像处理的处理负荷比所述第一显像处理的处理负荷高。21.一种图像处理方法，包括以下步骤：对输入原始图像应用显像处理；存储指示所述显像处理的结果的结果图像；获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及将所存储的结果图像与所获取到的差分图像相关联地存储，或者通过所获取到的差分图像来更新所存储的结果图像。
22.一种图像处理方法，包括以下步骤：对输入原始图像应用第一显像处理和与所述第一显像处理不同的第二显像处理；以及生成差分图像，所述差分图像指示第一结果图像与第二结果图像之间的差分，所述第一结果图像指示通过应用所述第一显像处理而获得的结果，所述第二结果图像指示通过应用所述第二显像处理而获得的结果。23.一种图像处理系统的控制方法，所述图像处理系统用于对原始图像进行显像并且包括第一设备和第二设备，其中，控制所述第一设备以进行以下步骤：对输入原始图像应用显像处理；存储指示所述显像处理的结果的结果图像；获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及基于所述差分图像来更新存储步骤中所存储的结果图像，控制所述第二设备以进行以下步骤：从所述第一设备获取原始图像；对所获取到的原始图像应用所述第一显像处理和所述第二显像处理；生成差分图像，所述差分图像指示通过应用所述第一显像处理而获得的第一结果图像与通过应用所述第二显像处理而获得的第二结果图像之间的差分；以及将所生成的差分图像传输到所述第一设备，以及所述第二显像处理的处理负荷比所述第一显像处理的处理负荷高。24.一种存储有程序的非暂时性计算机可读存储介质，所述程序用于使计算机进行图像处理方法，所述图像处理方法包括以下步骤：对输入原始图像应用显像处理；存储指示所述显像处理的结果的结果图像；获取差分图像，所述差分图像指示通过对原始图像应用与所述显像处理相同的第一显像处理而获得的第一结果图像与通过对原始图像应用与所述显像处理不同的第二显像处理而获得的第二结果图像之间的差分；以及通过相加所获取到的差分图像来更新存储步骤中所存储的结果图像，其中，所述第二显像处理的处理负荷比所述第一显像处理的处理负荷高。

技术总结
本申请提供了图像处理设备和方法、图像处理系统、控制方法和介质。在服务器设备中对RAW图像应用显像处理并且将其结果提供给客户终端的图像处理系统中，减少了传输到客户终端的图像数据的容量。客户终端对输入RAW图像应用低负荷显像处理，并且存储和显示其结果图像。另一方面，服务器通过应用低负荷显像处理和高负荷显像处理，生成两种结果图像之间的差分图像，并将该差分图像提供给客户终端。然后，基于差分图像，客户终端再现高负荷显像处理的结果图像。图像。图像。


技术研发人员：小仓畅
受保护的技术使用者：佳能株式会社
技术研发日：2021.06.22
技术公布日：2022/1/6