多分区预测模式中的跨分量预测的制作方法
所公开的实施例大体上涉及视频编解码,尤其涉及但不限于用于处理视频数据的系统和方法。
背景技术:
1、数字视频得到多种电子设备的支持,这些电子设备是诸如数字电视、笔记本电脑或台式电脑、平板电脑、数码相机、数字录制设备、数字媒体播放器、视频游戏机、智能手机、视频电话会议设备、视频流设备等。这些电子设备通过通信网络发送和接收或以其他方式传送数字视频数据,和/或将数字视频数据存储在存储设备上。由于通信网络的带宽容量有限,且存储设备的存储资源有限,因此可以采用视频编码,根据至少一种视频编码标准对视频数据进行压缩,然后再进行传送或存储。视频编码可以由电子设备/客户端设备上的或提供云服务的服务器上的硬件和/或软件执行。
2、视频编码通常采用预测方法(例如,帧间预测、帧内预测等),这些预测方法利用视频数据中固有的冗余。视频编码旨在将视频数据压缩为使用较低码率的形式,同时避免或最大程度地减少视频质量降低。现已开发出多种视频编解码标准。例如,高效视频编码(hevc/h.265)是一种作为mpeg-h项目的一部分而设计的视频压缩标准。itu-t和iso/iec于2013年(第1版)、2014年(第2版)、2015年(第3版)和2016年(第4版)发布了hevc/h.265标准。多功能视频编码(vvc/h.266)是一种旨在作为hevc的后继标准的视频压缩标准。itu-t和iso/iec于2020年(第1版)和2022年(第2版)发布了vvc/h.266标准。aomedia video 1(av1)是一种开放视频编码格式,被设计为hevc的替代方案。在2019年1月8日,发布了规范1.0.0验证版并附带勘误1。
技术实现思路
1、如上所述,编码(压缩)降低了带宽和/或存储空间需求。如后文详述,无损压缩和有损压缩均可采用。无损压缩是指通过解码过程能够从压缩后的原始信号重建出原始信号的精确副本的技术。有损压缩是指原始视频信息在编码过程中未完全保留且在解码过程中无法完全恢复的编解码过程。在使用有损压缩时,重建信号可能与原始信号不完全相同,但原始信号与重建信号之间的失真足够小,使得重建信号能够用于预期应用。可容忍的失真量取决于应用。例如,某些消费级视频流媒体应用的用户可能比电影或电视广播应用的用户容忍更高的失真。特定编码算法可实现的压缩比可选择或调整以反映不同的失真容忍度:可容忍的失真越高,通常越允许采用产生更高损失和更高压缩比的编码算法。
2、本发明描述了在跨分量预测(cross component prediction,ccp)模式中对视频数据进行跨分量帧内或帧间预测,其中当前编码块的第二颜色分量的多个样本中的每个样本是基于参考编码块(例如,当前编码块自身)的第一颜色分量的至少一个相关联样本来确定的。ccp模式对应于包括一定数量(n)个抽头的多抽头模型。每个抽头选自第一颜色分量的一个样本以及第一颜色分量的至少一个相关联相邻样本。在一些实施例中,抽头子集中的每个抽头可以对应于非线性项或偏移项。使用多个模型参数对所选抽头进行组合,以确定第二颜色分量的样本。在一些实施例中,第一颜色分量的样本是亮度样本,第二颜色分量的样本是色度样本。色度样本是从相应亮度样本、至少一个相邻亮度样本、非线性项和偏移项中选择的项的加权组合。在一些实施例中,当针对当前编码块启用ccp模式时,应用相应参考区域的样本来确定模型参数。
3、在一些实施例中,当应用第一颜色分量的样本来确定第二颜色分量的样本时,第一颜色分量的每个样本是亮度样本,并且第二颜色分量的每个样本是蓝色差色度(blue-difference chroma,cb)样本或红色差色度(red-difference chroma,cr)样本。替代地,在一些实施例中,第一颜色分量是红色、绿色和蓝色中的一种,第二颜色分量是红色、绿色和蓝色中的另一种。替代地,在一些实施例中,第一颜色分量和第二分量对应于不同于ycbcr颜色格式和rgb颜色格式的颜色格式。
4、根据一些实施例,提供了一种视频解码方法。方法包括:接收视频码流,视频码流包括当前图像帧的当前编码块,其中视频码流包括用于多分区预测模式(也称为多预测块模式)的第一语法元素;基于第一语法元素,确定多分区预测模式被启用,以基于多个分区重建当前编码块;确定多个分区中的每个分区包括相应色度样本并且对应于一组相应模型参数,该组相应模型参数用于基于一组相应亮度样本重建相应色度样本;确定第一色度样本位于与一组第一模型参数相对应的第一分区中;使用该组第一模型参数对一组第一亮度样本进行组合,以生成当前编码块的第一色度样本;以及重建包括当前编码块的第一色度样本的当前图像帧。
5、根据一些实施例,提供了一种视频编码方法。方法包括:接收视频数据,视频数据包括当前图像帧的当前编码块;对当前图像帧进行编码;通过视频码流传输已编码的当前图像帧;以及通过视频码流用信令指示用于多分区预测模式的第一语法元素502。当多分区预测模式被启用时,基于多个分区重建当前编码块,并且多个分区中的每个分区包括相应色度样本和一组相应亮度样本,并对应于一组相应模型参数,该组相应模型参数用于基于该组相应亮度样本重建相应色度样本。
6、根据一些实施例,提供了一种码流转换方法。方法包括:获得包括当前图像帧的源视频序列;以及执行源视频序列与视频码流之间的转换。视频码流包括:还包括当前编码块的当前图像帧;以及用于多分区预测模式的第一语法元素。当多分区预测模式被启用时,基于多个分区重建当前编码块,并且多个分区中的每个分区包括相应色度样本和一组相应亮度样本,并对应于一组相应模型参数,该组相应模型参数用于基于该组相应亮度样本重建相应色度样本。
7、根据一些实施例,提供了另一种视频解码方法。方法包括:接收视频码流,视频码流包括当前图像帧,当前图像帧包括当前编码块,其中视频码流包括用于几何划分模式(geometric partitioning mode,gpm)的第一语法元素和用于高级运动矢量预测(advanced motion vector prediction,amvp)合并预测模式的第二语法元素;基于第一语法元素和第二语法元素,确定gpm被启用,以对当前编码块应用非矩形划分,并确定amvp合并预测模式被启用,以对当前编码块的多个分区中的至少一个分区应用amvp;从视频码流中提取用于当前编码块的多个分区中的第一分区的第一运动矢量预测(motion vectorprediction,mvp)和第一运动矢量差(motion vector difference,mvd);基于第一mvp和第一mvd确定用于当前编码块的第一分区的amvp预测块;以及基于第一分区的amvp预测块重建包括当前编码块的当前图像帧。
8、根据一些实施例,提供了另一种视频解码方法。方法包括:接收视频码流,视频码流包括当前图像帧,当前图像帧包括当前编码块,其中视频码流包括用于gpm的第一语法元素;基于第一语法元素,确定gpm被启用,以对当前编码块应用非矩形划分;标识当前编码块的参考区域,参考区域包括上方参考区,上方参考区包括位于当前编码块的第一行上方的至少一行参考样本;确定上方参考区的每个样本的相应梯度值;基于上方参考区的多个样本的相应梯度值,标识上方参考区中的划分位置;基于上方参考区中的划分位置,确定当前编码块的划分线;以及基于当前编码块的划分线,重建包括当前编码块的当前图像帧。
9、根据一些实施例,提供了一种计算系统,诸如流媒体系统、服务器系统、个人计算机系统或其他电子设备。计算系统包括控制电路和存储器,存储器存储至少一个指令集。至少一个指令集包括用于执行本技术中所描述的任何方法的指令。在一些实施例中,计算系统包括编码器组件和解码器组件(例如,转码器)。
10、根据一些实施例,提供了一种非暂时性计算机可读存储介质。非暂时性计算机可读存储介质存储供计算系统执行的至少一个指令集。至少一个指令集包括用于执行本技术中所描述的任何方法的指令。
11、因此,公开了利用视频编码和解码方法的设备和系统。此类方法、设备和系统可以补充或替代用于视频编码/解码的常规方法、设备和系统。本说明书中所描述的特征和优点不一定涵盖所有方面,具体来说,本领域普通技术人员通过阅读本发明提供的附图、说明书和权利要求书,能清楚地理解一些附加的特征和优点。此外,应当注意,本说明书中使用的措辞主要是出于可读性和指导目的而选择的,并不一定是为了界定或限制本技术中所描述的主题而选择的。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com