基于视频的点云流的制作方法

技术特征：
1.一种视频解码设备，所述视频解码设备被配置为处理与三维(3d)空间相关联的视频数据，视频解码器包括：处理器，所述处理器被配置为：接收媒体容器文件；解析所述媒体容器文件以确定所述3d空间中的3d区域的区域识别符(id)以及与所述3d空间相关联的一个或多个轨组的相应轨组id；基于确定所述一个或多个轨组的所述相应轨组id与所述3d区域的所述区域id链接，确定所述一个或多个轨组与所述3d区域相关联；以及对属于所述一个或多个轨组的视频轨进行解码以渲染所述3d空间的所述3d区域的视觉表示。2.根据权利要求1所述的视频解码设备，其中所述一个或多个轨组共享公共轨组类型，并且其中进一步基于确定所述一个或多个轨组共享所述公共轨组类型，确定所述一个或多个轨组与所述3d区域相关联。3.根据权利要求1所述的视频解码设备，其中所述媒体容器文件包括定义与所述3d空间相关联的区域的数量以及与所述区域中的每一者相关联的轨组的数量的结构，并且所述处理器被配置为基于包括在所述结构中的信息来确定所述一个或多个轨组的所述相应轨组id与所述3d区域的所述区域id链接。4.根据权利要求1所述的视频解码设备，其中所述媒体容器文件包括指示对所述3d区域的至少一个特性的更新的定时元数据。5.根据权利要求4所述的视频解码设备，其中所述处理器被配置为基于所述定时元数据来确定所述一个或多个轨组的所述相应轨组id与所述3d区域的所述区域id链接。6.根据权利要求4所述的视频解码设备，其中所述3d空间包括多个区域，并且所述定时元数据包括与已被更新的所述区域的子集相关联的信息。7.根据权利要求1所述的视频解码设备，其中所述处理器被进一步配置为基于所述媒体容器文件确定与所述3d区域相关联的参考点和所述3d区域的维度。8.根据权利要求1所述的视频解码设备，其中属于所述一个或多个轨组的所述视频轨对应于二维(2d)帧中的一个或多个区块。9.根据权利要求1所述的视频解码设备，其中所述视频轨包括一个或多个样本条目，并且所述一个或多个样本条目中的每一者包括指示网络抽象层(nal)单元大小的数据字段的长度的指示。10.根据权利要求9所述的视频解码设备，其中所述一个或多个样本条目中的每一者还包括与所述样本条目相关联的v-pcc参数集的数量或与所述样本条目相关联的图集nal单元的阵列的数量的指示。11.一种用于对与三维(3d)空间相关联的视频数据进行解码的方法，所述方法包括：接收媒体容器文件；解析所述媒体容器文件以确定所述3d空间中的3d区域的区域识别符(id)以及与所述3d空间相关联的一个或多个轨组的相应轨组id；基于确定所述一个或多个轨组的所述相应轨组id与所述3d区域的所述区域id链接，确定所述一个或多个轨组与所述3d区域相关联；以及
对属于所述一个或多个轨组的视频轨进行解码以渲染所述3d空间的所述3d区域的视觉表示。12.根据权利要求11所述的方法，其中所述一个或多个轨组共享公共轨组类型，并且其中进一步基于确定所述一个或多个轨组共享所述公共轨组类型，确定所述一个或多个轨组与所述3d区域相关联。13.根据权利要求11所述的方法，其中所述媒体容器文件包括定义与所述3d空间相关联的区域的数量以及与所述区域中的每一者相关联的轨组的数量的结构，基于包括在所述结构中的信息来确定所述一个或多个轨组的所述相应轨组id与所述3d区域的所述区域id链接。14.根据权利要求11所述的方法，其中所述媒体容器文件包括指示对所述3d区域的至少一个特性的更新的定时元数据。15.根据权利要求14所述的方法，其中所述3d空间包括多个区域，并且所述定时元数据包括与已被更新的所述区域的子集相关联的信息。16.根据权利要求11所述的方法，其中属于所述一个或多个轨组的所述视频轨对应于二维(2d)帧中的一个或多个区块。17.根据权利要求11所述的方法，其中所述视频轨包括一个或多个样本条目，并且所述一个或多个样本条目中的每一者包括指示网络抽象层(nal)单元大小的数据字段的长度的指示。18.根据权利要求17所述的方法，其中所述一个或多个样本条目中的每一者还包括与所述样本条目相关联的v-pcc参数集的数量或与所述样本条目相关联的图集nal单元的阵列的数量的指示。19.一种视频编码设备，所述视频编码设备被配置为编码和传输与三维(3d)空间相关联的信息，所述视频编码器包括：处理器，所述处理器被配置为：将所述3d空间划分成一个或多个3d区域，其中所述3d区域中的每一者被分配有相应区域标识符(id)；将与所述一个或多个3d区域中的至少一者相关联的视频数据编码成多个基于视频的点云压缩(v-pcc)分量轨；将所述多个v-pcc分量轨组织成轨组并且将轨组id分配给所述轨组；以及在单独v-pcc轨中指示所述3d空间包括所述一个或多个3d区域并且所述轨组与所述一个或多个3d区域中的所述至少一者链接，其中所述轨组经由所述轨组的所述轨组id和所述一个或多个3d区域中的所述至少一者的所述区域id与所述一个或多个3d区域中的所述至少一者链接；以及将媒体容器文件传输到接收设备，其中所述媒体容器文件包括所述一个或多个v-pcc分量轨和所述单独v-pcc轨。20.根据权利要求19所述的视频编码设备，其中所述媒体容器文件还包括指示与所述一个或多个3d区域相关联的更新的定时元数据。

技术总结
本文公开了与一个或多个ISO基础媒体文件格式(ISOBMFF)容器文件中的基于视频的点云流相关的系统、方法和工具。提供了点云数据的容器格式，并且该容器格式至少指示该点云的3D区域与一个或多个基于视频的点云压缩(V-PCC)轨之间的关系。该V-PCC轨可被分组在一起并且与该3D区域链接以允许对该3D区域的空间访问。该3D区域链接以允许对该3D区域的空间访问。该3D区域链接以允许对该3D区域的空间访问。


技术研发人员：阿赫麦德
受保护的技术使用者：VID拓展公司
技术研发日：2020.05.21
技术公布日：2022/2/7