用于图片编码和解码的方法和设备与流程

技术特征：
1.一种用于视频解码的方法，包括：访问编码视频的图像块的第一重构版本以及通过第一神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成适于被用作参考的所述图像块的第二重构版本通过第二神经网络(cnnb)对表示所述图像块的所述第二重构版本的信息进行滤波，以形成适于显示的所述图像块的第三重构版本其中，所述第一神经网络和所述第二神经网络被使用联合损失函数联合训练。2.一种用于视频解码的装置，其包括被配置成执行以下操作的一或多个处理器：访问编码视频的图像块的第一重构版本以及通过第一神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成适于被用作参考的所述图像块的第二重构版本通过第二神经网络(cnnb)对表示所述图像块的所述第二重构版本的信息进行滤波，以形成适于显示的所述图像块的第三重构版本其中，所述第一神经网络和所述第二神经网络被使用联合损失函数联合训练。3.根据权利要求1所述的方法或根据权利要求2所述的装置，其中，所述图像块的所述第一重构版本被用作用于训练所述第二神经网络的附加输入。4.根据权利要求1所述的方法或根据权利要求2所述的装置，其中，通过第一神经网络对所述图像块的所述第一重构版本进行滤波以形成将被用作参考的所述图像块的第二重构版本，包括：
‑
通过初始神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成将被用作所述第一神经网络和第二神经网络的输入的所述图像块的初始重构版本(s0)；其中，所述初始神经网络被训练以优化客观和感知滤波。5.根据权利要求1所述的方法或根据权利要求2所述的装置，其中，表示所述第二版本的信息是所述第二版本或所述第一神经网络的输出的中间表示，所述中间表示对应于所述第一神经网络的最后一层之前的层的输出。6.一种用于视频编码的方法，包括：访问编码视频的图片的图像块的第一重构版本以及通过第一神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成适于被用作参考的所述图像块的第二重构版本其中，所述第一神经网络与第二神经网络(cnnb)被使用联合损失函数联合训练，所述第二神经网络用于对表示所述图像块的所述第二重构版本的信息进行滤波，以形成适于显示的所述图像块的第三重构版本7.一种用于视频编码的装置，包括被配置成进行以下操作的一或多个处理器：访问编码视频的图片的图像块的第一重构版本以及
通过第一神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成适于被用作参考的所述图像块的第二重构版本其中，所述第一神经网络与第二神经网络(cnnb)被使用联合损失函数联合训练，所述第二神经网络用于对表示所述图像块的所述第二重构版本的信息进行滤波，以形成将被显示的所述图像块的第三重构版本8.根据权利要求6所述的方法或根据权利要求7所述的装置，其中，所述图像块的所述第一重构版本被用作用于训练所述第二神经网络的附加输入。9.根据权利要求6所述的方法或根据权利要求7所述的装置，其中，通过第一神经网络对所述图像块的所述第一重构版本进行滤波以形成将被用作参考的所述图像块的第二重构版本，包括：
‑
通过初始神经网络(cnna)对所述图像块的所述第一重构版本进行滤波，以形成将被用作所述第一神经网络和第二神经网络的输入的所述图像块的初始重构版本(s0)；其中，所述初始神经网络被训练以优化客观和感知滤波。10.根据权利要求6和8
‑
9中任一项所述的方法或根据权利要求7
‑
9中任一项所述的装置，其中，所述联合损失函数包括表示所述图像块与所述图像块的所述第二重构版本之间的第一损失函数的第一项。11.根据权利要求10所述的方法或根据权利要求10所述的装置，其中，所述第一损失函数是l1或l2范数。12.根据权利要求6和8
‑
11中任一项所述的方法或根据权利要求7
‑
11中任一项所述的装置，其中，所述联合损失函数包括表示所述图像块与所述图像块的所述第三重构版本之间的第二损失函数的第二项。13.根据权利要求12所述的方法或根据权利要求12所述的装置，其中，所述第二损失函数被使用生成对抗网络确定。14.根据权利要求6所述的方法或根据权利要求7所述的装置，其中，所述图像块的所述第一重构版本被用作用于训练所述第二神经网络的附加输入。15.一种信号，包括根据权利要求6和8
‑
14中任一项所述的方法或根据权利要求7
‑
14中任一项所述的装置生成的数据。16.一种计算机程序，包括用于实现根据权利要求1或权利要求3至5中任一项所述的方法或用于实现根据权利要求6或权利要求8至14中任一项所述的方法的程序代码指令。17.一种信息存储装置，存储用于实现根据权利要求1或权利要求3至5中任一项所述的方法或用于实现根据权利要求6或权利要求8至14中任一项所述的方法的程序代码指令。

技术总结
公开了一种用于视频解码的方法。访问编码视频的图像块的第一重构版本。所述图像块的第一重构版本由第一神经网络滤波，以形成将被用作参考的所述图像块的第二重构版本。通过第二神经网络对所述图像块的第二重构版本进行滤波，以形成所述图像块的将被显示的第三重构版本。第一神经网络和第二神经网络被联合训练。本。第一神经网络和第二神经网络被联合训练。本。第一神经网络和第二神经网络被联合训练。


技术研发人员：F
受保护的技术使用者：交互数字VC控股公司
技术研发日：2020.02.06
技术公布日：2021/10/23