用于屏幕内容的自适应分辨率变化和可缩放编解码的制作方法

技术特征：
1.一种用于视频处理的方法，包括：针对图片或视频与所述图片或视频的比特流表示之间的转换，基于所述比特流表示中包含的指示确定所述图片或视频是否具有原生分辨率；以及基于所述确定执行所述转换。2.根据权利要求1所述的方法，其中，在下述选项中的至少一个当中信令通知所述指示：依赖参数集(dps)、视频参数集(vps)、序列参数集(sps)、图片参数集(pps)、片和条带标头。3.根据权利要求1所述的方法，其中，在补充增强信息(sei)消息中信令通知所述指示。4.一种用于视频处理的方法，包括：针对图片或视频与所述图片或视频的比特流表示之间的转换，基于一个或多个某种编解码工具的使用或信令通知的消息，确定所述图片或视频是否是屏幕内容；以及基于所述确定执行所述转换。5.根据权利要求4所述的方法，其中，所述的某种编解码工具包括变换跳过编解码模式，并且在具有变换跳过编解码模式的区域的数量、区域的比例和区域的面积中的至少一者超过阈值时，将所述图片或视频确定为屏幕内容。6.根据权利要求4所述的方法，其中，所述的某种编解码工具包括块差分脉冲编解码调制(bdpcm)编解码模式，并且在具有bdpcm编解码模式的区域的数量、区域的比例和区域的面积中的至少一者超过阈值时，将所述图片或视频确定为屏幕内容。7.根据权利要求4所述的方法，其中，所述的某种编解码工具包括帧内块复制编解码模式，并且在具有帧内块复制编解码模式的区域的数量、区域的比例和区域的面积中的至少一者超过阈值时，将所述图片或视频确定为屏幕内容。8.根据权利要求4所述的方法，其中，所述的某种编解码工具包括调色板编解码模式，并且在具有调色板编解码模式的区域的数量、区域的比例和区域的面积中的至少一者超过阈值时，将所述图片或视频确定为屏幕内容。9.根据权利要求4所述的方法，其中，在下述选项中的至少一个当中信令通知所述消息：依赖参数集(dps)、视频参数集(vps)、序列参数集(sps)、图片参数集(pps)、片和条带标头。10.根据权利要求4-9中的任何一项所述的方法，其中，在将所述图片或视频确定为屏幕内容时，不允许分辨率变化。11.根据权利要求4-9中的任何一项所述的方法，其中，在将所述图片或视频确定为屏幕内容时，并且在参考图片和当前图片具有不同尺寸时，插值滤波器的替换集可适用于所述图片或视频。12.根据权利要求11所述的方法，其中，所述插值滤波器的替换集中的滤波器等同于获得所述参考图片中的最近整像素。13.根据权利要求11所述的方法，其中，对于所述插值滤波器的替换集中的每一插值滤
波器，只有一个条目具有非零系数。14.根据权利要求11所述的方法，其中，所述插值滤波器的替换集包括双线性插值滤波器。15.根据权利要求4-14中的任何一项所述的方法，其中，在将当前图片或视频确定为屏幕内容时，并且在参考图片和当前图片具有不同尺寸时，一个或多个约束可适用于所述图片或视频。16.根据权利要求15所述的方法，其中，所述一个或多个约束包括：所述当前图片的图片输出宽度picoutputwidthl和/或图片输出高度picoutputheightl等于所述参考图片的那些。17.根据权利要求16所述的方法，其中，所述一个或多个约束包括：所述参考图片的一致性窗口和所述当前图片的一致性窗口具有相同宽度。18.根据权利要求16所述的方法，其中，所述一个或多个约束包括：所述参考图片的一致性窗口和所述当前图片的一致性窗口具有相同高度。19.一种用于视频处理的方法，包括：针对图片或视频与所述图片或视频的可缩放编解码比特流表示之间的转换，确定与所述图片或视频的可缩放视频编解码相关联的一个或多个约束；以及基于所述确定执行所述转换。20.根据权利要求19所述的方法，其中，所述可缩放编解码比特流表示至少包括第一层和第二层，其中，所述第一层具有低质量，并且所述第二层具有高质量。21.根据权利要求20所述的方法，其中，所述一个或多个约束包括：不能使用具有低质量的第一层预测具有高质量的第二层。22.根据权利要求20所述的方法，其中，如果使用所述第二层预测所述第一层，则不允许所述第一层中的量化参数(qp)大于所述第二层中的qp。23.根据权利要求20所述的方法，其中，如果使用所述第二层预测所述第一层，则所述第一层中的块、变换单元(tu)、预测单元(pu)、编解码单元(cu)、编解码树单元(ctu)或编解码树块(ctb)的最大允许qp以所述第二层中的对应块、tu、pu、cu、ctu或ctb的qp为上限。24.根据权利要求20所述的方法，其中，如果使用所述第二层预测所述第一层，则不允许所述第一层的分辨率小于所述第二层中的分辨率。25.根据权利要求19-24中的任何一项所述的方法，其中，对具有相同图片顺序计数编号的图片应用所述约束。26.根据权利要求20所述的方法，其中，所述一个或多个约束包括：具有低质量的所述第一层的一致性窗口不能大于具有高质量的所述第二层的一致性窗口。27.根据权利要求25所述的方法，其中，不允许较低分辨率图片的一致性窗口的宽度大于较高分辨率图片的一致性窗口的宽度。28.根据权利要求25所述的方法，其中，不允许较低分辨率图片的一致性窗口的高度大于较高分辨率图片的一致性窗口的高度。29.根据权利要求26-28中的任何一项所述的方法，其中，对具有相同图片顺序计数编号的图片应用所述约束。30.根据权利要求19-29中的任何一项所述的方法，其中，所述一个或多个约束包括：具
有相同图片顺序计数的层的最大数量是可设置的。31.根据权利要求30所述的方法，其中，具有相同图片顺序计数的层的允许数量处于1和某一数量t之间，且包含1和t，t为整数。32.根据权利要求23所述的方法，其中，在dps、vps、sps、pps、片和条带标头中的至少一者当中指示具有相同图片顺序计数的层的最大数量。33.根据权利要求19-32中的任何一项所述的方法，其中，假想参考解码器(hrd)参数基于具有相同图片顺序计数的图片。34.根据权利要求33所述的方法，其中，hrd参数基于解码图片缓冲区(dpb)中的具有相同图片顺序计数的图片。35.根据权利要求33所述的方法，其中，将具有相同图片顺序计数的所有图片视为整个图片来推导所述hrd参数。36.根据权利要求33所述的方法，其中，具有相同图片顺序计数的每一层具有特定hrd以推导缓冲区参数。37.一种用于视频处理的方法，包括：针对图片或视频与所述图片或视频的比特流表示之间的转换，在所述转换使用无损编解码模式时确定跳过一个或多个语法；以及基于所述确定执行所述转换。38.根据权利要求37所述的方法，其中，所述一个或多个语法包括量化参数(qp)相关语法。39.根据权利要求37或38所述的方法，其中，所述无损编解码模式由cu_transquant_bypass_flag指示。40.根据权利要求37或38所述的方法，其中，对于区域、图片或视频，通过dps、vps、sps、pps、片、砖块和条带标头中的至少一者当中的消息指示无损编解码模式。41.根据权利要求37所述的方法，其中，所述一个或多个语法包括用于qp差异的语法。42.根据权利要求37所述的方法，其中，所述一个或多个语法包括有关色度qp的语法。43.根据权利要求37所述的方法，其中，所述一个或多个语法包括编解码块标志(cbf)相关语法。44.根据权利要求43所述的方法，其中，所述无损编解码模式由cu_transquant_bypass_flag指示。45.根据权利要求44所述的方法，其中，对于区域、图片或视频，通过dps、vps、sps、pps、片、砖块和条带标头中的至少一者当中的消息指示无损编解码模式。46.根据权利要求43所述的方法，其中，所述一个或多个语法包括用于亮度cbf的语法。47.根据权利要求43所述的方法，其中，所述一个或多个语法包括用于色度cbf的语法。48.根据权利要求1-47中的任一项所述的方法，其中，所述转换的执行包括从所述图片或视频生成所述比特流表示。49.根据权利要求1-47中的任何一项所述的方法，其中，所述转换的执行包括从所述比特流表示生成所述图片或视频。50.一种视频系统中的装置，其包括处理器以及具有位于其上的指令的非暂态存储器，其中，所述指令在被所述处理器执行时使得所述处理器实施根据权利要求1到49中的任何
一项所述的方法。51.一种存储在非暂态计算机可读介质上的计算机程序产品，所述计算机程序产品包括用于实施根据权利要求1到49中的任何一项所述的方法的程序代码。52.一种非暂态计算机可读介质，其记录了用于实施根据权利要求1到49中的任何一项所述的方法的程序代码。

技术总结
描述了用于屏幕内容的自适应分辨率变化和可缩放编解码。一个示例是一种用于视频处理的方法，其包括：针对图片或视频与该图片或视频的比特流表示之间的转换，基于该比特流表示中包含的指示确定该图片或视频是否具有原生分辨率；以及基于该确定执行该转换。以及基于该确定执行该转换。以及基于该确定执行该转换。


技术研发人员：许继征 张凯 张莉 刘鸿彬 王悦
受保护的技术使用者：字节跳动有限公司
技术研发日：2020.09.21
技术公布日：2022/4/29