在多平面成像格式中传输体积图像的制作方法

摘要: 背景技术:技术实现思路1、本文公开了用于以mpi格式传输体积图像的方法和装置的各种实施例。根据示例实施例,将多平面图像的视频序列的纹理层和阿尔法层作为瓦片(ti...
在多平面成像格式中传输体积图像的制作方法

背景技术:

技术实现思路

1、本文公开了用于以mpi格式传输体积图像的方法和装置的各种实施例。根据示例实施例,将多平面图像的视频序列的纹理层和阿尔法层作为瓦片(tile)打包到二维(2d)视频帧的序列中。然后对2d视频帧的序列进行压缩以生成视频比特流,该视频比特流与指定相关mpi参数(例如,指定2d视频帧序列中的瓦片的打包布置的参数)的元数据比特流一起传输。可选择的打包布置包括但不限于 (i) 空间打包的纹理层和阿尔法层与时间打包的视图,(ii) 空间打包的视图与时间打包的纹理层和阿尔法层,以及 (iii) 空间打包的纹理层和空间打包的阿尔法层在时间上与时间打包的视图交错。在一些示例中,该元数据比特流包括选自由以下各项构成的组的参数:参考视图的大小、多平面图像中的层数、同时视图的数量、打包布置的特性、层合并信息、动态范围调整信息、以及参考视图信息。在一些示例中,该元数据比特流包括一个或多个补充增强信息(sei)消息。

2、根据示例实施例,提供了一种用于对多平面图像序列进行编码的装置,该装置包括:至少一个处理器;以及包括程序代码的至少一个存储器,其中,该至少一个存储器和该程序代码被配置为与该至少一个处理器一起使该装置至少:生成视频帧序列,该视频帧中的每一个包括相应的多个瓦片,这些瓦片表示这些多平面图像中的相应一个或多个的层;生成元数据比特流以至少指定该视频帧序列中的瓦片的打包布置;通过对该视频帧序列应用视频压缩来生成视频比特流;以及复用该视频比特流和该元数据比特流以用于传输。

3、根据另一示例实施例,提供了一种用于对多平面图像序列进行编码的方法,该方法包括:生成视频帧序列,该视频帧中的每一个包括相应的多个瓦片,这些瓦片表示这些多平面图像中的一个或多个的层;生成元数据比特流以至少指定该视频帧序列中的瓦片的打包布置;通过对该视频帧序列应用视频压缩来生成视频比特流;以及复用该视频比特流和该元数据比特流以用于传输。

4、根据又一示例实施例,提供了一种用于对接收到的比特流进行解码的装置,该比特流中已编码有多平面图像序列,该装置包括:至少一个处理器;以及包括程序代码的至少一个存储器,其中,该至少一个存储器和该程序代码被配置为与该至少一个处理器一起使该装置至少:对该接收到的比特流进行解复用,以获得其中已编码有视频帧序列的视频比特流,并获得至少指定该视频帧序列中的瓦片的打包布置的元数据比特流,这些瓦片表示这些多平面图像的层;通过对该视频比特流应用视频解压缩来重建该视频帧序列;以及使用来自该视频帧序列的瓦片并且基于该元数据比特流来重建该多平面图像序列。

5、根据又一示例实施例,提供了一种用于对接收到的比特流进行解码的方法,该比特流中已编码有多平面图像序列,该方法包括:对该接收到的比特流进行解复用,以获得其中已编码有视频帧序列的视频比特流,并获得至少指定该视频帧序列中的瓦片的打包布置的元数据比特流,这些瓦片表示这些多平面图像的层;通过对该视频比特流应用视频解压缩来重建该视频帧序列;以及使用来自该视频帧序列的瓦片并且基于该元数据比特流来重建该多平面图像序列。

6、对于上述方法的一些实施例,提供了一种存储有指令的非暂态计算机可读介质,这些指令在由至少一个处理器执行时,使该至少一个处理器执行包括上述方法中的对应方法的操作。

1. 一种用于解码比特流的方法,所述方法包括:

2. 如权利要求1所述的方法,其中,所述元数据进一步指示每个mpi层仅存在一个补片,并且层补片的宽度和高度等于相机投影平面的宽度和高度。

3.如权利要求1所述的方法,其中,指示使用单个解码器包括设置

4.如权利要求1所述的方法,其中,指示存在包含纹理和透明度而不包含占用和几何的打包视频包括设置:

5.如权利要求4所述的方法,进一步指示通过设置以下各项来禁用对几何和占用的缩放:

6.如权利要求1所述的方法,其中,指示单个mpi视图包括设置

7.如权利要求1所述的方法,其中,指示具有单个瓦片的单个图集包括设置:

8. 如权利要求2所述的方法,其中,补片宽度和高度信息用信号通知为:

9.如权利要求2所述的方法,其中,指示针对单个mpi相机视图生成所有补片包括设置:

10.如权利要求2所述的方法,其中,指示每层使用单个补片包括设置

11.如权利要求1所述的方法,其中,所述元数据进一步指示仅使用帧内图集瓦片和帧内补片。

12.一种存储有指令的非暂态计算机可读介质,所述指令在由计算机系统的处理器执行时,使所述计算机系统执行包括根据权利要求1所述的方法的操作。

13.一种装置,包括处理器并且被配置为执行如权利要求1所述的方法。