基于模板的多变换集选择的制作方法

摘要: 背景技术:1、视频编码系统可以用于压缩数字视频信号,例如,以减少这样的信号所需的存储和/或传输带宽。视频编码系统可以包括例如基于块、基于小波和/或基于对象的系统...
基于模板的多变换集选择的制作方法

背景技术:

1、视频编码系统可以用于压缩数字视频信号,例如,以减少这样的信号所需的存储和/或传输带宽。视频编码系统可以包括例如基于块、基于小波和/或基于对象的系统。

技术实现思路

1、公开了用于执行基于模板的多变换集选择(mtss)的系统、方法和手段(instrumentalities)。mtss可以通过基于模板分析自适应地切换变换集来修改。该修改可以为编码器提供附加变换集以(例如,以捕获残差统计),同时保持低信令成本。

2、一种设备,诸如视频解码设备,可以执行(例如,被配置成执行)以下动作中的一个或多个。该设备可以确定与视频块相关联的预测块。该设备可以例如基于预测块和视频块来获得与视频块相关联的残差块。该设备可以基于与候选变换集相关联的相应度量从候选变换集中针对视频块选择变换集。针对候选变换集中的每个的相应度量可以基于候选变换集的相应变换系数来确定。该设备可以基于所选择的变换集针对视频块执行变换。

3、该设备可以从候选变换集中选择变换集,而无需接收(例如,从视频比特流接收)标识变换集的指示。所选择的变换集可以是候选变换集中排序最高的候选变换集(例如,根据相应度量)。

4、该设备可以从视频比特流接收是否选择最高排序的候选变换集(例如,根据相应度量)作为变换集的指示。该设备可以基于该指示(例如,mtss标志)来选择变换集。例如,如果来自视频比特流的指示指示应选择最高排序的候选变换集,则该设备可以选择最高排序的候选变换集作为变换集。例如,如果来自视频比特流的指示指示不应选择最高排序的候选变换集,则该设备可以不选择最高排序的候选变换集作为变换集。

5、预测块可以基于与视频块相关联的多个模板(例如,三个模板,诸如左模板、上模板和左上模板)来获得。该设备可以基于用于获得预测块的多个模板来获得残差模板。该设备可以用样本填充残差模板以获得残差块。例如,可以添加样本,使得残差块与视频块具有相同大小。

6、针对每个候选变换集的相应度量可以基于以下各项来确定:候选变换集的相应变换系数的能量和;候选变换集的相应变换系数的绝对值和;或残差块与通过将候选变换集应用于残差块而获得的重建残差块之间的失真。

7、视频解码方法可以包括确定与视频块相关联的预测块。该方法可以包括获得与视频块相关联的残差块(例如,基于预测块和视频块)。该方法可以包括基于与候选变换集相关联的相应度量,针对视频块(例如,从多个候选变换集)选择变换集。针对每个候选变换集的相应度量可以基于与残差块相关联的候选变换集的变换系数来确定。该方法可以包括基于所选择的变换集针对视频块执行变换。

8、可以从多个候选变换集中选择变换集,而无需接收标识变换集的指示。所选择的变换集可以是根据与候选变换集相关联的相应度量排序最高的候选变换集。

9、该方法可以包括从视频比特流接收是否选择变换集作为最高排序的候选变换集的指示。可以基于该指示来选择变换集。

10、预测块可以基于与视频块相关联的多个模板来获得。获得残差块可以包括基于用于获得预测块的多个模板来获得残差模板,并且用样本填充残差模板以获得残差块。可以添加样本,使得残差块与视频块是相同大小的。

11、本文中描述的系统、方法和手段可以涉及解码器。在一些示例中,本文中描述的系统、方法和手段可以涉及编码器。在一些示例中,本文中描述的系统、方法和手段可以涉及信号(例如,来自编码器和/或由解码器接收)。视频数据(例如,视频比特流)可以包括根据本文中提供的方法编码的视频块/当前块的指示。计算机可读介质可以包括用于使一个或多个处理器执行本文中描述的方法的指令。计算机程序产品可以包括指令,当程序由一个或多个处理器执行时,该指令可以使一个或多个处理器执行本文中描述的方法。

1.一种视频解码器,包括:

2.根据权利要求1所述的视频解码器,其中处理器被配置成从多个候选变换集中选择变换集,而无需接收标识所述变换集的指示。

3.根据权利要求2所述的视频解码器,其中所选择的变换集是根据与多个候选变换集相关联的相应度量在多个候选变换集中具有最高排序的候选变换集。

4.根据权利要求1所述的视频解码器,其中处理器被进一步配置成从视频比特流接收是否根据与多个候选变换集相关联的相应度量从多个候选变换集中选择所述变换集作为最高排序的候选变换集的指示,处理器被进一步配置成基于所述指示来选择变换集。

5.根据权利要求4所述的视频解码器,其中处理器被配置成如果来自视频比特流的指示指示要根据与多个候选变换集相关联的相应度量从多个候选变换集中选择最高排序的候选变换集作为变换集,则从多个候选变换集中选择所述变换集作为最高排序的候选变换集。

6.根据权利要求4所述的视频解码器,其中处理器被配置成如果来自视频比特流的指示指示不根据与多个候选变换集相关联的相应度量从多个候选变换集中选择最高排序的候选变换集作为变换集,则从多个候选变换集中选择较低排序的候选变换集。

7.根据权利要求1-6中任一项所述的视频解码器,其中预测块是基于与当前视频块相关联的多个模板来获得的,并且其中处理器被配置成获得残差块包括处理器被配置成:

8.根据权利要求1-7中任一项所述的视频解码器,其中针对每个候选变换集的相应度量是基于与残差块相关联的候选变换集的变换系数的能量和或绝对值和来确定的。

9.根据权利要求1-7中任一项所述的视频解码器,其中针对每个候选变换集的相应度量是基于残差块与通过至少将候选变换集应用于残差块而获得的重建残差块之间的失真来确定的。

10.一种视频解码方法,包括:

11.根据权利要求10所述的视频解码方法,其中从多个候选变换集中选择变换集,而无需接收标识所述变换集的指示。

12.根据权利要求11所述的视频解码方法,其中所选择的变换集是根据与多个候选变换集相关联的相应度量在多个候选变换集中排序最高的候选变换集。

13.根据权利要求10所述的视频解码方法,进一步包括从视频比特流接收是否根据与多个候选变换集相关联的相应度量从多个候选变换集中选择所述变换集作为最高排序的候选变换集的指示,其中变换集是进一步基于所述指示来选择的。

14.根据权利要求13所述的视频解码方法,其中如果来自视频比特流的指示指示要根据与多个候选变换集相关联的相应度量从多个候选变换集中选择最高排序的候选变换集作为变换集,则从多个候选变换集中选择所述变换集作为最高排序的候选变换集,并且其中如果来自视频比特流的指示指示不从多个候选变换集中选择最高排序的候选变换集作为变换集,则从多个候选变换集中选择较低排序的候选变换集作为变换集。

15.根据权利要求10-14中任一项所述的视频解码方法,其中预测块是基于与当前视频块相关联的多个模板来获得的,并且其中获得残差块包括: