结合多个参考帧的概率模型初始化的制作方法
所公开的实施例一般涉及视频编码,包括但不限于用于熵编码和概率模型的系统和方法。
背景技术:
1、数字视频受到各种电子设备的支持,例如数字电视、膝上型或台式计算机、平板电脑、数码相机、数字录制设备、数字媒体播放器、视频游戏机、智能手机、视频电话会议设备、视频流传输设备等。这些电子设备通过通信网络发送和接收或以其他方式传送数字视频数据,和/或将数字视频数据存储在存储设备上。由于通信网络的带宽容量有限以及存储设备的内存资源有限,可以在传输或存储视频数据之前,根据一种或多种视频编码标准,通过视频编码对视频数据进行压缩。视频编码可以由提供云服务的电子/客户端设备或服务器上的硬件和/或软件来执行。
2、视频编码通常利用预测方法(例如,帧间预测、帧内预测等),其利用视频数据中固有的冗余。视频编码旨在将视频数据压缩成使用较低比特率的形式,同时避免或最小化视频质量的降低。目前已开发出多种视频编解码器标准。例如,高效率视频编码(hevc/h.265)是作为mpeg-h项目的一部分而设计的视频压缩标准。itu-t和iso/iec分别于2013年(第1版)、2014年(第2版)、2015年(第3版)和2016年(第4版)发布了hevc/h.265标准。多功能视频编码(vvc/h.266)是旨在作为hevc继任者的视频压缩标准。itu-t和iso/iec分别于2020年(第1版)和2022年(第2版)发布了vvc/h.266标准。aomedia video 1 (av1)是一种开放视频编码格式,被设计为hevc的替代方案。2019年1月8日,发布了带有勘误1的经验证的规范版本1.0.0。
技术实现思路
1、本公开描述了一组用于视频(图像)压缩的方法,包括在对视频比特流的数据进行熵编码和解码时切换概率模型的方法。概率模型可以表示为用于算术编码的累积分布函数(cdf)。可以基于已编码信息来初始化概率模型,使得用于熵编码的概率比具有默认初始化值的概率模型更准确。在一个示例中,来自多个参考帧的相应概率模型的加权平均值可以作为当前帧的一个或多个上下文的初始化值。使用参考帧的上下文的加权平均值来初始化当前帧上下文可以(例如,由于更高效的熵编码)减少信令开销并提高编码准确度(例如,更准确的上下文可以提供更好的预测)。
2、根据一些实施例,一种视频解码方法包括:(i)接收包括多个帧的视频比特流(例如,已编码视频序列);(ii)为所述多个帧中的当前帧识别多个参考帧;(iii)获得所述多个参考帧各自的上下文;(iv)通过使用一组对应的权重对所述各自的上下文执行加权平均,来初始化所述当前帧的当前帧上下文,其中所述一组对应的权重包括固定权重;(v)使用所述当前帧上下文对所述当前帧的一个或多个语法元素进行熵解码;以及(vi)使用所述一个或多个语法元素重建所述当前帧。
3、根据一些实施例,一种视频解码方法包括:(i)接收包括多个帧的视频比特流;(ii)为所述多个帧中的当前帧识别多个参考帧;(iii)获得所述多个参考帧各自的上下文;(iv)通过使用一组对应的权重对所述各自的上下文执行加权平均,来初始化所述当前帧的当前帧上下文;(v)使用所述当前帧上下文对所述当前帧的一个或多个语法元素进行熵解码;以及(vi)使用所述一个或多个语法元素重建当前帧。
4、根据一些实施例,一种视频编码方法包括:(i)接收包括多个帧的视频数据(例如,源视频序列);(ii)为所述多个帧中的当前帧识别多个参考帧;(iii)获得所述多个参考帧各自的上下文;(iv)通过使用一组对应的权重对所述各自的上下文执行加权平均来初始化所述当前帧的当前帧上下文,其中所述一组对应的权重包括固定权重;以及(v)使用所述当前帧上下文对所述当前帧的一个或多个语法元素进行熵编码。
5、根据一些实施例,一种处理视觉媒体数据的方法包括:(i)获取包含多个帧的源视频序列;以及(ii)根据格式规则在所述源视频序列和视觉媒体数据的视频比特流之间执行转换,其中所述视频比特流包括多个已编码帧;并且其中所述格式规则指定:(a)为所述多个帧中的当前帧识别多个参考帧;(b)获得所述多个参考帧各自的上下文;(c)通过使用一组对应的权重对所述各自的上下文执行加权平均来初始化所述当前帧的当前帧上下文,其中所述一组对应的权重包括固定权重;(d)使用所述当前帧上下文对所述当前帧的一个或多个语法元素进行熵解码;以及(e)使用所述一个或多个语法元素重建所述当前帧。
6、根据一些实施例,提供了一种计算系统,诸如流媒体系统、服务器系统、个人计算机系统或其他电子设备。所述计算系统包括控制电路和存储有一组或多组指令的存储器。所述一组或多组指令包括用于执行本文所述的任何方法的指令。在一些实施例中,计算系统包括编码器组件和解码器组件(例如,代码转换器)。
7、根据一些实施例,提供了一种非易失性计算机可读存储介质。所述非易失性计算机可读存储介质存储有一组或多组用于由计算系统执行的指令。所述一组或多组指令包括用于执行本文所述的任何方法的指令。
8、因此,本申请公开了具备视频编码与解码方法的设备及系统。此类方法、设备和系统能够补充或替代传统的视频编码/解码方法、设备与系统。本说明书所记载的特征及优点并未穷尽全部内容,尤其是本领域普通技术人员结合本公开提供的附图、说明书及权利要求书,可显而易见地获知更多附加特征与优点。此外需说明,本说明书所用文字主要出于可读性与指导目的的考量,并且不一定是为了界定或限制本文所描述的主题而选择的。
1.一种视频解码方法,在具有存储器和一个或多个处理器的计算系统处执行,其特征在于,所述方法包括:
2.根据权利要求1所述的方法,其中所述固定权重包括为7/8的第一权重和为1/8的第二权重。
3.根据权利要求1所述的方法,其中所述固定权重对应于预定义的加权因子。
4.根据权利要求3所述的方法,其中所述预定义的加权因子与所述当前帧和参考帧之间的距离成比例。
5.根据权利要求3所述的方法,进一步包括从多个预定义的加权因子中选择所述预定义的加权因子。
6.根据权利要求5所述的方法,其中基于在高级语法中信令通知的指示符来选择所述预定义的加权因子。
7.根据权利要求5所述的方法,其中所述多个预定义的加权因子包括1/2加权因子、3/4加权因子和7/8加权因子。
8.根据权利要求1所述的方法,其中所述一组对应的权重包括分配给第一参考帧的第一权重和分配给次参考帧的第二权重。
9.根据权利要求8所述的方法,其中所述第一参考帧比所述次参考帧更接近所述当前帧,并且其中所述第一权重比所述第二权重更大。
10.根据权利要求1所述的方法,其中所述当前帧上下文对应于包括所述一个或多个语法元素的第一组语法元素;并且
11.根据权利要求10所述的方法,其中所述第一组对应的权重包括一组不等的权重,并且其中所述第二组对应的权重包括一组相等的权重。
12.根据权利要求10所述的方法,其中所述第二组对应的权重在所述视频比特流中被信令通知,或在解码组件处被推导。
13.根据权利要求1所述的方法,其中所述一个或多个语法元素包括一个或多个与运动矢量相关的语法元素。
14.根据权利要求1所述的方法,其中所述多个参考帧各自的上下文是基于已编码信息获得的。
15.根据权利要求1所述的方法,进一步包括从所述多个参考帧中选择一组参考帧,其中所述各自的上下文对应于所述一组参考帧。
16.一种视频编码方法,在具有存储器和一个或多个处理器的计算系统处执行,其特征在于,所述方法包括:
17.根据权利要求16所述的方法,进一步包括在视频比特流中信令通知所述一个或多个经熵编码的语法元素和所述当前帧。
18.根据权利要求16所述的方法,进一步包括在视频比特流中信令通知所获得的所述各自的上下文。
19.一种非易失性计算机可读存储介质,其特征在于,其存储由视频编码方法生成的视频比特流,所述视频编码方法包括:
20.根据权利要求19所述的非易失性计算机可读存储介质,其中所述视频比特流包括指示所述多个参考帧的指示符。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com