用于视频译码的链式运动向量预测的缩放和重排序的制作方法

摘要: 本公开涉及视频编码和视频解码。背景技术:1、数字视频能力可被并入到各种各样的设备中,包括数字电视机、数字直播系统、无线广播系统、个人数字助理(pda)、膝上型计...
用于视频译码的链式运动向量预测的缩放和重排序的制作方法

本公开涉及视频编码和视频解码。

背景技术:

1、数字视频能力可被并入到各种各样的设备中,包括数字电视机、数字直播系统、无线广播系统、个人数字助理(pda)、膝上型计算机或台式计算机、平板计算机、电子书阅读器、数字相机、数字记录设备、数字媒体播放器、视频游戏设备、视频游戏控制台、蜂窝或卫星无线电话(所谓的“智能电话”)、视频电话会议设备、视频流式传输设备等。数字视频设备实现视频译码技术,诸如在由mpeg-2、mpeg-4、itu-t h.263、itu-t h.264/mpeg-4(第10部分,高级视频译码(avc))、itu-t h.265/高效率视频译码(hevc)、itu-t h.266/多功能视频译码(vvc)定义的标准及此类标准的扩展以及诸如由开放媒体联盟开发的aomedia video1(av1)等专有视频编解码器/格式中描述的视频译码技术。通过实现此类视频译码技术,视频设备可更加高效地发送、接收、编码、解码和/或存储数字视频信息。

2、视频译码技术包括空间(图片内)预测和/或时间(图片间)预测以减少或移除在视频序列中固有的冗余。对于基于块的视频译码,视频切片(例如,视频图片或视频图片的一部分)可被划分为视频块,该视频块还可被称为译码树单元(ctu)、译码单元(cu)和/或译码节点。图片的帧内译码(i)后的切片中的视频块是使用相对于同一图片中的相邻块中的参考样本的空间预测来编码的。图片的帧间译码(p或b)后的切片中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或者相对于其他参考图片中的参考样本的时间预测。图片可称为帧,并且参考图片可称为参考帧。

技术实现思路

1、一般来讲,本公开描述用于链式运动向量预测(cmvp)的技术。在cmvp中,针对当前块,视频编码器或视频解码器从源向量(例如,相同图片中相邻块或非相邻块的运动向量或块向量、或另一图片的块的运动向量)开始,并且将该源向量输入到cmvp过程中。输出是cmvp候选。

2、在该cmvp过程中,视频编码器或视频解码器从该源向量开始,在限定的跟踪深度内跟踪由相关联向量标识的每个块的向量(例如,从该cmvp过程的一个块开始按顺序回溯跟踪到最后一个块的限定数量的向量),并且使用该向量来确定该cmvp候选。例如,该源向量可标识第一块,该第一块的第一向量(例如,运动向量或块向量)可标识第二块,该第二块的第二向量可标识第三块并且以此类推。该视频编码器和视频解码器可在该限定的跟踪深度内利用该源向量、第一向量、第二向量等等以生成cmvp候选。该视频编码器和视频解码器可针对不同源向量重复此类操作以确定一个或多个cmvp候选。

3、根据一个或多个示例,为了生成该cmvp候选,该视频编码器和视频解码器可使用cmvp过程的上述示例技术来生成初始cmvp候选,然后基于该当前图片和参考图片来缩放该初始cmvp候选以生成该cmvp候选。又如,该视频编码器和视频解码器可基于该当前图片和参考图片来缩放该源向量,然后将缩放后的源向量输入到该cmvp过程中以生成该cmvp候选。

4、利用示例缩放,所得的cmvp候选可标识比未执行缩放的情况下更近似该当前块的预测块。以这种方式,示例技术可改善总体视频译码技术。例如,由于该预测块可更近似该当前块,因此该预测块与该当前块之间的残差(例如,差)可相对小,使得发信号通知的残差信息更少并且带宽利用率得以改善,并且潜在地使得已解码视频质量更佳。

5、在一个示例中,本公开描述一种对视频数据进行编码或解码的方法,该方法包括:针对当前图片的当前块确定一个或多个链式运动向量预测(cmvp)候选,其中确定该一个或多个cmvp候选包括:确定源向量;基于该源向量来生成初始cmvp候选;以及基于该当前图片和参考图片来缩放该初始cmvp候选以生成该一个或多个cmvp候选中的cmvp候选;以及基于该一个或多个cmvp候选来对该当前块进行编码或解码。

6、在一个示例中,本公开描述一种对视频数据进行编码或解码的方法,该方法包括:针对当前图片的当前块确定一个或多个链式运动向量预测(cmvp)候选,其中确定该一个或多个cmvp候选包括:确定源向量;基于该当前图片和参考图片来缩放该源向量以生成缩放后的源向量;以及基于该缩放后的源向量来生成该一个或多个cmvp候选中的cmvp候选;以及基于该一个或多个cmvp候选来对该当前块进行编码或解码。

7、在一个示例中,本公开描述了一种用于对视频数据进行编码或解码的设备,该设备包括:一个或多个存储器,该一个或多个存储器被配置为存储该视频数据;和处理电路,该处理电路耦合到该一个或多个存储器,其中该处理电路被配置为:针对当前图片的当前块确定一个或多个链式运动向量预测(cmvp)候选,其中为了确定该一个或多个cmvp候选,该处理电路被配置为:确定源向量;基于该源向量来生成初始cmvp候选;以及基于该当前图片和参考图片来缩放该初始cmvp候选以生成该一个或多个cmvp候选中的cmvp候选;以及基于该一个或多个cmvp候选来对该当前块进行编码或解码。

8、在一个示例中,本公开描述了一种用于对视频数据进行编码或解码的设备,该设备包括:一个或多个存储器,该一个或多个存储器被配置为存储该视频数据;和处理电路,该处理电路耦合到该一个或多个存储器,其中该处理电路被配置为:针对当前图片的当前块确定一个或多个链式运动向量预测(cmvp)候选,其中为了确定该一个或多个cmvp候选,该处理电路被配置为:确定源向量;基于该当前图片和参考图片来缩放该源向量以生成缩放后的源向量;以及基于该缩放后的源向量来生成该一个或多个cmvp候选中的cmvp候选;以及基于该一个或多个cmvp候选来对该当前块进行编码或解码。

9、在附图和以下描述中阐述一个或多个示例的细节。根据描述、附图以及权利要求书,其他特征、目的和优点将是显而易见的。

1.一种对视频数据进行编码或解码的方法,所述方法包括:

2.根据权利要求1所述的方法,其中所述源向量包括所述当前图片中所述当前块的相邻块的运动向量、所述当前图片中所述当前块的非相邻块的运动向量、或另一图片中块的运动向量中的一者。

3.根据权利要求1所述的方法,其中所述参考图片是第一参考图片列表或第二参考图片列表中的一者中的预先确定的图片。

4.根据权利要求1所述的方法,其中基于所述源向量来生成所述初始cmvp候选包括:

5.根据权利要求1所述的方法,其中基于所述当前图片和所述参考图片来缩放所述初始cmvp候选包括:

6.根据权利要求1所述的方法,其中所述源向量是第一源向量,所述初始cmvp候选是第一初始cmvp候选,所述cmvp候选是第一cmpv候选,并且所述参考图片是第一参考图片,所述方法还包括:

7.根据权利要求1所述的方法,所述方法还包括:

8.根据权利要求7所述的方法,其中构建所述候选运动向量预测器列表包括:基于所述一个或多个cmvp候选的模板匹配成本来对所述候选运动向量预测器列表进行排序。

9.根据权利要求7所述的方法,其中对所述当前块进行编码或解码包括:对所述当前块进行解码,并且其中对所述当前块进行解码包括:

10.根据权利要求7所述的方法,其中对所述当前块进行编码或解码包括:对所述当前块进行编码,并且其中对所述当前块进行编码包括:

11.一种用于对视频数据进行编码或解码的设备,所述设备包括:

12.根据权利要求11所述的设备,其中所述源向量包括所述当前图片中所述当前块的相邻块的运动向量、所述当前图片中所述当前块的非相邻块的运动向量、或另一图片中块的运动向量中的一者。

13.根据权利要求11所述的设备,其中所述参考图片是第一参考图片列表或第二参考图片列表中的一者中的预先确定的图片。

14.根据权利要求11所述的设备,其中为了基于所述源向量来生成所述初始cmvp候选,所述处理电路被配置为:

15.根据权利要求11所述的设备,其中为了基于所述当前图片和所述参考图片来缩放所述初始cmvp候选,所述处理电路被配置为:

16.一种用于对视频数据进行编码或解码的设备,所述设备包括:

17.根据权利要求16所述的设备,其中所述源向量包括所述当前图片中所述当前块的相邻块的运动向量、所述当前图片中所述当前块的非相邻块的运动向量、或另一图片中块的运动向量中的一者。

18.根据权利要求16所述的设备,其中所述参考图片是第一参考图片列表或第二参考图片列表中的一者中的预先确定的图片。

19.根据权利要求16所述的设备,其中为了基于所述缩放后的源向量来生成所述cmvp候选,所述处理电路被配置为:

20.根据权利要求16所述的设备,其中为了基于所述当前图片和所述参考图片来缩放所述源向量以生成所述缩放后的源向量,所述处理电路被配置为: