用于场景描述的配件表示的制作方法

摘要: 本原理总体涉及当场景包括可以由配件完善的动画对象时场景描述的格式化、传输和渲染的领域。具体而言,本原理涉及以允许读取装置自动使配件适配动画对象的方式格式化场景描...
用于场景描述的配件表示的制作方法

本原理总体涉及当场景包括可以由配件完善的动画对象时场景描述的格式化、传输和渲染的领域。具体而言,本原理涉及以允许读取装置自动使配件适配动画对象的方式格式化场景描述。

背景技术:

1、本章节旨在向读者介绍可能涉及下面描述和/或要求保护的本原理的各个方面的各领域方面。本讨论被认为有助于向读者提供背景信息以促进对本原理的各个方面的更好理解。因此,应当理解,这些陈述应从这个角度来解读,而不是作为对现有技术的承认。

2、三维场景通常由场景描述来表示。场景描述包括不同的数据,这些数据包括资源数组(例如3d网格、纹理图像、动画描述)以及描述场景的元素的组织的节点树。场景可以包括动画对象(例如角色、化身、机器或车辆)以及用于这些动画对象的配件(例如帽子、马克杯、眼镜)。在下文中,词语“角色”用于任何指代的动画对象。配件通常是由不同艺术家设计的通用对象,存储在资源库中,并且必须适配于给定场景的动画对象。例如,如果必须将通用眼镜(来自应用中的可用物品列表)添加到角色的头上,它们不会自动适配到角色上。在现有解决方案的情况下,眼镜将作为子节点添加到角色的节点,但不会适配于其身体或面部形态。这会导致3d元素之间的比例问题和/或相互穿透(也称为裁剪)。为了获得良好的渲染质量,在预处理步骤中手动调整眼镜的3d资源比例并将其与角色的头部对准,这需要艺术技能和时间。因此,缺乏一种当角色的面部或身体动态变化时动态适配配件的方法(例如,当角色笑时适配眼镜的位置)。

技术实现思路

1、下文呈现对本原理的简要概述,以便提供对本原理的一些方面的基本理解。本 技术实现要素: 并不是对本原理的详尽概括。其不旨在指出本原理的关键或重要元素。以下概述仅以简化形式呈现了本原理的一些方面来作为下文提供的更详细描述的序言。

2、提供了方法、设备和数据流以用于编码包括场景描述的3d场景,其允许数字内容创作装置或渲染装置将配件无缝地拼接在3d场景的角色上。场景描述包括用于如角色等对象和用于配件的节点树。配件节点包括网格和关键点。场景描述被编码在数据流中。当配件要被拼接至角色时,检索对象的对应关键点并将其与配件的关键点对准。

3、本原理涉及一种方法,包括:获取包括一个或多个对象和一个或多个配件的三维场景。针对一个或多个对象和一个或多个配件生成包括节点树的场景描述。对应于一个或多个配件的节点包括:网格或对网格的引用以及一个或多个关键点。一个或多个关键点包括类型和定位信息。关键点可以是网格的顶点,因此其定位由其索引指示。在一种变型中,关键点位于网格的面上,并且其定位由面的索引和用于计算重心的权重指示。然后,场景描述被编码在数据流中。在一个实施例中,一个或多个关键点在对应于一个或多个配件的节点中按类型分组。

4、本原理还涉及包括处理器和与处理器相关联的存储器的装置,其中该存储器被配置为实施上述方法。

5、本原理还涉及一种方法,包括从数据流获取包括用于一个或多个对象和一个或多个配件的节点树的场景描述。

6、对应于一个或多个配件的节点包括:网格或对网格的引用以及一个或多个第一关键点。一个或多个第一关键点包括类型和定位信息。关键点可以是网格的顶点,因此其定位由其索引指示。在一种变型中,关键点位于网格的面上,并且其定位由面的索引和用于计算重心的权重指示。当配件要被拼接至如角色等对象时,检索对象的对应关键点并将其与配件的关键点对准。

7、本原理还涉及包括处理器和与处理器相关联的存储器的装置,其中该存储器被配置为实施上述方法。

8、本原理还涉及一种数据流,其包括包含针对一个或多个对象和一个或多个配件生成的节点树的场景描述。

9、对应于一个或多个配件的节点包括:网格或对网格的引用以及一个或多个关键点。一个或多个关键点包括类型和定位信息。关键点可以是网格的顶点,因此其定位由其索引指示。在一种变型中,关键点位于网格的面上,并且其定位由面的索引和用于计算重心的权重指示。然后,场景描述被编码在数据流中。在一个实施例中,一个或多个关键点在对应于一个或多个配件的节点中按类型分组。

1.一种方法,包括:

2.如权利要求1所述的方法,其中所述一个或多个关键点的所述类型指示所述一个或多个关键点是所述网格的顶点,并且所述定位信息包括所述顶点的索引,或者其中所述一个或多个关键点的所述类型指示所述一个或多个关键点是所述网格的面上的重心,并且所述定位信息包括所述面的索引和所述重心的权重。

3.如权利要求1或2所述的方法,其中所述一个或多个关键点在对应于所述一个或多个配件的节点中按类型分组。

4.如权利要求1至3中的一项所述的方法,其中对应于所述一个或多个配件的节点包括关于所述一个或多个配件的语义的信息,所述信息指示所述一个或多个配件与所述三维场景中的其他对象之间的关系。

5.如权利要求1至4中的一项所述的方法,其中配件的所述一个或多个关键点包括语义信息,所述语义信息指示所述一个或多个关键点如何能够与所述三维场景中的其他对象的关键点拼接。

6.一种装置,包括与一个或多个处理器相关联的存储器,所述一个或多个处理器被配置成用于:

7.如权利要求6所述的装置,其中所述一个或多个关键点的所述类型指示所述一个或多个关键点是所述网格的顶点,并且所述定位信息包括所述顶点的索引,或者其中所述一个或多个关键点的所述类型指示所述一个或多个关键点是所述网格的面上的重心,并且所述定位信息包括所述面的索引和所述重心的权重。

8.如权利要求6或7所述的装置,其中所述一个或多个关键点在对应于所述一个或多个配件的节点中按类型分组。

9.如权利要求6至8中的一项所述的装置,其中对应于所述一个或多个配件的节点包括关于所述一个或多个配件的语义的信息,所述信息指示所述一个或多个配件与所述三维场景中的其他对象之间的关系。

10.如权利要求6至9中的一项所述的装置,其中配件的所述一个或多个关键点包括语义信息,所述语义信息指示所述一个或多个关键点如何能够与所述三维场景中的其他对象的关键点拼接。

11.一种方法,包括:

12.如权利要求11所述的方法,其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的顶点,并且所述定位信息包括所述顶点的索引,或者其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的面上的重心,并且所述定位信息包括所述面的索引和所述重心的权重。

13.如权利要求11或12所述的方法,其中所述一个或多个第一关键点在对应于所述一个或多个配件的节点中按类型分组。

14.如权利要求11至13中的一项所述的方法,其中对应于所述一个或多个配件的节点包括关于所述一个或多个配件的语义的信息,所述信息指示所述一个或多个配件与三维场景中的其他对象之间的关系。

15.如权利要求11至14中的一项所述的方法,其中配件的所述一个或多个关键点包括语义信息,所述语义信息指示所述一个或多个关键点如何能够与所述三维场景中的其他对象的关键点拼接。

16.一种装置,包括与一个或多个处理器相关联的存储器,所述一个或多个处理器被配置成用于:

17.如权利要求16所述的装置,其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的顶点,并且所述定位信息包括所述顶点的索引,或者其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的面上的重心,并且所述定位信息包括所述面的索引和所述重心的权重。

18.如权利要求16或17所述的装置,其中所述一个或多个第一关键点在对应于所述一个或多个配件的节点中按类型分组。

19.如权利要求16至18中的一项所述的装置,其中对应于所述一个或多个配件的节点包括关于所述一个或多个配件的语义的信息,所述信息指示所述一个或多个配件与三维场景中的其他对象之间的关系。

20.如权利要求16至19中的一项所述的装置,其中配件的所述一个或多个关键点包括语义信息,所述语义信息指示所述一个或多个关键点如何能够与所述三维场景中的其他对象的关键点拼接。

21.一种数据流,包括包含用于一个或多个对象和一个或多个配件的节点树的场景描述,其中对应于所述一个或多个配件的节点包括关于网格和一个或多个第一关键点的信息,所述一个或多个第一关键点包括类型和定位信息。

22.如权利要求21所述的数据流,其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的顶点,并且所述定位信息包括所述顶点的索引,或者其中所述一个或多个第一关键点的所述类型指示所述一个或多个第一关键点是所述网格的面上的重心,并且所述定位信息包括所述面的索引和所述重心的权重。

23.如权利要求21或22所述的数据流,其中所述一个或多个第一关键点在对应于所述一个或多个配件的节点中按类型分组。