网格数据发送装置、网格数据发送方法、网格数据接收装置及网格数据接收方法与流程

摘要: 实施方式提供了一种用于提供3d内容以向用户提供诸如虚拟现实(vr)、增强现实(ar)、混合现实(mr)和自驾驶服务的各种服务的方法。背景技术:1、3d内容中的点...
网格数据发送装置、网格数据发送方法、网格数据接收装置及网格数据接收方法与流程

实施方式提供了一种用于提供3d内容以向用户提供诸如虚拟现实(vr)、增强现实(ar)、混合现实(mr)和自驾驶服务的各种服务的方法。

背景技术:

1、3d内容中的点云数据或网格数据是3d空间中的点集合。然而,由于3d空间中的大量点,难以创建点云数据或网格数据。

2、换言之,需要大吞吐量来发送和接收具有数量可观的点的3d数据(例如,点云或网格数据)。

技术实现思路

1、技术问题

2、实施方式的目的是提供用于高效地发送和接收网格数据以解决上述问题的设备和方法。

3、实施方式的另一目的是提供用于解决网格数据的时延和编码/解码复杂度的设备和方法。

4、根据实施方式的一个目的是提供用于准确地标识并发送/接收算术编码的位移数据的设备和方法。

5、然而,实施方式的范围不限于上述目的,并且还可以扩展到本领域技术人员基于本文件的全部内容可以推断出的其他目的。

6、技术方案

7、为了实现上述目的和其他优点,根据实施方式的解码方法可以包括对比特流中的基础网格进行解码、对该比特流中的位移数据进行解码以及对该比特流中的属性数据进行解码。

8、根据实施方式,比特流可以包括数据单元。每个数据单元可以包括数据单元头部和数据单元有效载荷。数据单元头部可以包括指定数据单元有效载荷中承载的数据的类型的类型信息。图集数据、基础网格、位移数据和属性数据可以基于类型信息从比特流中解析。

9、根据实施方式,位移数据可以是基于视频编解码器或算术编解码器编码的数据,并且基于视频编解码器编码的位移数据和基于算术编解码器编码的位移数据可以由类型信息标识。

10、根据实施方式,对比特流中的位移数据进行解码可以包括:基于指定数据单元有效载荷中承载的数据是基于算术编解码器编码的位移数据的类型信息,基于参数集信息对位移数据执行基于算术编解码器的解码。

11、根据实施方式,参数集信息可以包括指定算术编码的位移数据是否与图集相关联的信息。

12、根据实施方式,基于指定算术编码的位移数据与图集相关联的信息,参数集信息还可以包括用于对位移数据进行解码的处理的位移相关信息。

13、根据实施方式,位移相关信息可以包括针对图集指定用于从算术编码的位移数据解码的位移向量样本的转换方法的信息。

14、根据实施方式,对比特流中的位移数据进行解码可以包括:基于指定数据单元有效载荷中承载的数据是基于视频编解码器编码的位移数据的类型信息,对位移数据执行基于视频编解码器的解码。

15、根据实施方式,解码装置可以包括存储器和至少一个处理器,所述至少一个处理器连接到所述存储器。所述至少一个处理器可以被配置为对比特流中的基础网格进行解码、对该比特流中的位移数据进行解码以及对该比特流中的属性数据进行解码。

16、根据实施方式,编码方法可以包括对网格数据的基础网格进行编码、对网格数据的位移数据进行编码以及对网格数据的属性数据进行编码。

17、根据实施方式,位移数据可以基于视频编解码器或算术编解码器编码。

18、根据实施方式,编码的基础网格、编码的位移数据和编码的属性数据可以被复用到比特流中并被发送。比特流可以包括数据单元。每个数据单元可以包括数据单元头部和数据单元有效载荷。数据单元头部可以包括指定数据单元有效载荷中承载的数据的类型的类型信息。数据单元有效载荷可以包括编码的基础网格、编码的位移数据和编码的属性数据中的一者。基于视频编解码器编码的位移数据和基于算术编解码器编码的位移数据可以由类型信息标识。

19、根据实施方式,编码装置可以包括存储器和至少一个处理器,所述至少一个处理器连接到所述存储器。所述至少一个处理器可以被配置为对网格数据的基础网格进行编码、对网格数据的位移数据进行编码以及对网格数据的属性数据进行编码。

20、根据实施方式,非暂时性计算机可读存储介质可以存储由编码方法生成的比特流。

21、根据实施方式,发送方法可以包括获取用于网格数据的比特流以及发送包括该比特流的数据。

22、根据实施方式,比特流可以基于对网格数据的基础网格进行编码、对网格数据的位移数据进行编码以及对网格数据的属性数据进行编码来生成。

23、有益效果

24、根据实施方式的网格数据发送方法、网格数据发送装置、网格数据接收方法和网格数据接收装置可以提供高质量三维(3d)服务。

25、根据实施方式的网格数据发送方法、网格数据发送装置、网格数据接收方法和网格数据接收装置可以支持各种视频编解码器方案。

26、根据实施方式的网格数据发送方法、网格数据发送装置、网格数据接收方法和网格数据接收装置可以提供诸如自主驾驶服务的通用3d内容。

27、根据实施方式的网格数据发送方法、网格数据发送装置、网格数据接收方法和网格数据接收装置可以通过v3c单元类型区分使用视频编码来编码/解码的位移数据与使用算术编码来编码/解码的位移数据,并对该区分进行发信号通知,从而允许接收器有效地标识并解码位移数据。

28、根据实施方式的网格数据发送方法、网格数据发送装置、网格数据接收方法和网格数据接收装置可以在v3c参数集的v-dmc扩展中发信号通知与算术编码的位移数据相关的位移相关信息,从而允许接收器有效地解码算术编码的位移数据。

1.一种解码方法,所述解码方法包括以下步骤:

2.根据权利要求1所述的解码方法,

3.根据权利要求2所述的解码方法,

4.根据权利要求3所述的解码方法,

5.根据权利要求4所述的解码方法,

6.根据权利要求5所述的解码方法,

7.根据权利要求6所述的解码方法,

8.根据权利要求3所述的解码方法,

9.一种解码装置,所述解码装置包括:

10.一种编码方法,所述编码方法包括以下步骤:

11.根据权利要求10所述的编码方法,

12.根据权利要求11所述的编码方法,

13.一种编码装置,所述编码装置包括:

14.一种非暂时性计算机可读存储介质,所述非暂时性计算机可读存储介质存储由根据权利要求10所述的方法生成的比特流。

15.一种方法,所述方法包括以下步骤: