模型配准方法、装置、计算机设备、计算机可读存储介质及计算机程序产品与流程

摘要: 本技术涉及人工智能技术,尤其涉及一种模型配准方法、装置、计算机设备、计算机可读存储介质及计算机程序产品。背景技术:1、目前,虚拟现实技术发展迅猛,快速进行对目标...
模型配准方法、装置、计算机设备、计算机可读存储介质及计算机程序产品与流程

本技术涉及人工智能技术,尤其涉及一种模型配准方法、装置、计算机设备、计算机可读存储介质及计算机程序产品。

背景技术:

1、目前,虚拟现实技术发展迅猛,快速进行对目标对象的模型重建与编辑是虚拟社交等场景下的一个核心诉求,例如当待重建的目标对象为人脸时,为了快速进行人脸重建、编辑以及后续的驱动,通常采用参数化的人脸模型进行低维表示,然而上述方法是对人脸进行整体拟合,人脸参数的维数太低,能表达的人脸有限,并且易出现脸部畸形,造成拟合结果与原始模型相似程度不高。

技术实现思路

1、本技术实施例提供一种模型配准方法、装置、计算机可读存储介质及计算机程序产品,能够提高模型配准的相似度。

2、本技术实施例的技术方案是这样实现的:

3、本技术实施例提供一种模型配准方法,所述方法包括:获取第一三维模型中的目标对象的位置信息矩阵,以及获取所述第一三维模型中的第一区域的第一参数信息;其中,所述位置信息矩阵包括与所述目标对象相关的多个顶点的位置信息,所述第一区域为所述第一三维模型划分出的多个区域中的任一区域,所述第一参数信息包括以下一项或多项参数:与第一区域相关的各顶点的平均位置信息、第一区域对应的主成分分析pca矩阵、各顶点出现在第一区域的第一权重,所述pca矩阵包括与第一区域相关的顶点的数量、第一区域的pca主成分数、各pca主成分对应的位置信息;

4、基于所述第一参数信息,构建包括第一优化模型和第二优化模型的目标优化模型,所述目标优化模型用于表示所述第一优化模型与所述第二优化模型之间的差距,所述第一优化模型用于计算对所述第一三维模型相关联的所有区域中的所有顶点进行局部变换后的位置信息,所述第二优化模型用于计算对所述第一三维模型中的所有顶点进行全局变换后的位置信息;

5、基于所述第一参数信息对所述目标优化模型进行求解,确定目标参数信息,所述目标参数信息包括以下一项或多项目标参数:全局变换矩阵、第一区域对应的第一局部变换矩阵、与第一区域相关的第一pca系数;

6、基于所述第一参数信息、所述目标参数信息和所述第一优化模型,获得目标混合模型,所述目标混合模型用于实现对所述目标对象的模型配准。

7、上述方案中,所述基于所述第一参数信息对所述优化模型进行求解,确定目标参数信息,包括:基于所述第一参数信息、预设的初始第一局部变换矩阵和初始第一pca系数,对所述目标优化模型进行最小值求解,根据求解得到的最小值确定初始全局变换矩阵;执行以下第n轮处理:基于所述第一参数信息、所述第一优化模型、所述第二优化模型以及第n-1轮的目标参数信息,对所述第一三维模型中的顶点与标准模型中的顶点进行对齐处理,得到第n对齐关系;基于所述第一参数信息、所述第n对齐关系、第n-1轮的目标参数信息中的一项或多项,对所述目标优化模型进行线性求解,根据求解得到的结果确定第n轮的目标参数信息;基于所述第n-1轮的全局变换矩阵和第n轮的全局变换矩阵,判断是否满足预设条件,在不满足预设条件时,基于第n轮的目标参数信息执行第n+1轮处理,直至满足所述预设条件;其中,n为大于或等于2的整数,当n等于2时,所述第n-1轮的目标参数信息为初始目标参数信息,所述初始目标参数信息包括初始全局变换矩阵、初始第一局部变换矩阵和初始第一pca系数,所述对齐关系包括预设网格点数量的语义对应关系,所述对齐关系中的全局变换后的第一三维模型中的第一顶点与对应的局部变换后的第一三维模型中的第一顶点的语义一致。

8、上述方案中,所述第一局部变换矩阵包括第一局部缩放参数、第一局部旋转参数和第一局部平移参数,所述基于所述第一参数信息、所述第n对齐关系、第n-1轮的目标参数信息中的一项或多项,对所述目标优化模型进行线性求解,根据求解得到的结果确定第n轮的目标参数信息,包括:基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n-1轮的第一局部变换矩阵、以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第一结果确定第n轮的第一pca系数;基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n-1轮的第一局部旋转参数、第n轮的第一pca系数以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第二结果确定第n轮的第一局部缩放参数和第n轮的第一局部平移参数;基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n轮的第一pca系数、第n轮的第一局部缩放参数、第n轮的第一局部平移参数以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第三结果确定第n轮的第一局部旋转参数;基于所述第n对齐关系、第n轮的第一pca系数、第n轮的第一局部变换矩阵以及所述第一参数信息,对所述目标优化模型进行最小值求解,根据求解得到的最小值确定第n轮的全局变换矩阵。

9、上述方案中,所述基于所述第一参数信息、预设的初始第一局部变换矩阵和初始第一pca系数,对所述目标优化模型进行最小值求解,根据求解得到的最小值确定初始全局变换矩阵,包括:基于所述第一参数信息、所述初始第一局部变换矩阵和所述初始第一pca系数,利用所述第一优化模型对所述第一三维模型的第一区域中的各顶点的位置信息进行局部变换处理,得到所述第一三维模型中的各顶点对应的第一位置信息;基于所述第一三维模型中的各顶点对应的第一位置信息和所述标准模型中的各顶点的位置信息,对所述第一三维模型中的顶点和所述标准模型中的顶点进行初始对齐处理,确定初始对齐关系,所述初始对齐关系中包括第一数量的语义对应关系,所述语义对应关系表示所述第一三维模型中的第一顶点与所述标准模型中的第二顶点的语义一致;基于具有语义对应关系的第一顶点的位置信息和第二顶点对应的位置信息,求解所述目标优化模型的最小值,根据求解得到的最小值确定初始全局变换矩阵。

10、上述方案中,所述基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n-1轮的第一局部变换矩阵、以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第一结果确定第n轮的第一pca系数,包括:基于所述第n对齐关系中的第一顶点的位置信息、所述第n-1轮的全局变换矩阵以及所述第二优化模型,计算得到所述第n对齐关系中的第一顶点的第二位置信息;基于所述第n对齐关系中的第一顶点在第一区域的平均位置信息、第n-1轮的第一局部缩放参数和第一局部旋转参数,计算得到所述第n对齐关系中的第一顶点在第一区域的第一平均位置信息;基于所述第n对齐关系中的第一顶点所属的第一区域对应的pca矩阵、第n-1轮的第一局部缩放参数和第一局部旋转参数,计算得到所述第n对齐关系中的第一顶点所属的第一区域对应的第一pca矩阵;按照位置信息包括的多个空间维度,将所述目标优化模型拆分为各空间维度对应的目标优化模型;基于所述第n对齐关系中的第一顶点出现在第一区域的第一权重、第一顶点的第二位置信息、第一顶点在第一区域的第一平均位置信息、第一顶点所属的第一区域对应的第一pca矩阵、以及第n-1轮的第一局部平移参数,对预设网格点数量的各空间维度对应的目标优化模型进行最小化求解,根据求解得到的多个最小值确定第n轮的第一pca系数。

11、上述方案中,所述基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n-1轮的第一局部旋转参数、第n轮的第一pca系数以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第二结果确定第n轮的第一局部缩放参数和第n轮的第一局部平移参数,包括:基于所述第n对齐关系中的第一顶点的位置信息、所述第n-1轮的全局变换矩阵以及所述第二优化模型,计算得到所述第n对齐关系中的第一顶点的第三位置信息;基于所述第n对齐关系中的第一顶点的位置信息、第一顶点所属的第一区域对应的pca矩阵以及第n轮的第一pca系数,计算得到所述第n对齐关系中的第一顶点所属第一区域对应的第一pca模型;基于第n-1轮的第一局部旋转参数和所述第一区域对应的第一pca模型,计算得到所述第n对齐关系中的第一顶点所属第一区域对应的第二pca模型;按照位置信息包括的多个空间维度,将所述目标优化模型拆分为各空间维度对应的目标优化模型;基于与所述第n对齐关系中的第一顶点出现在第一区域的第一权重、第一顶点的第三位置信息、以及第一顶点所属第一区域对应的第二pca模型,对预设网格点数量的各空间维度对应的目标优化模型进行最小化求解,根据求解得到的多个最小值确定第n轮的第一局部缩放参数和第n轮的第一局部平移参数。

12、上述方案中,所述基于所述第n对齐关系、第n-1轮的全局变换矩阵、第n轮的第一pca系数、第n轮的第一局部缩放参数、第n轮的第一局部平移参数以及所述第一参数信息,对所述目标优化模型进行线性求解,根据求解得到的第三结果确定第n轮的第一局部旋转参数,包括:基于所述第n对齐关系中的第一顶点的位置信息、所述第n-1轮的全局变换矩阵以及所述第二优化模型,计算得到所述第n对齐关系中的第一顶点的第四位置信息;基于所述第n对齐关系中的第一顶点的位置信息、第一顶点所属的第一区域对应的pca矩阵以及第n轮的第一区域pca系数,计算得到所述第n对齐关系中的第一顶点所属第一区域对应的第三pca模型;基于第n轮的第一局部缩放参数和第一区域对应的第三pca模型,计算得到所述第n对齐关系中的第一顶点所属第一区域对应的第四pca模型;按照所述第n对齐关系中的第一顶点所属的区域是否为第一区域,将所述目标优化模型拆分为第一顶点的第四位置信息与第三优化模型和第四优化模型相减,所述第三优化模型与第一顶点所属的除第一区域外的其他区域有关,所述第四优化模型与第一顶点所属的第一区域有关;基于与所述第n对齐关系中的第一顶点出现在第一区域的第一权重、第一顶点的第四位置信息、第n轮的第一区域对应的局部平移参数、以及第一顶点所属第一区域对应的第四pca模型,对拆分后的目标优化模型进行线性求解,根据求解得到的第三结果确定第n轮的局部旋转参数。

13、本技术实施例提供一种计算机设备,所述计算机设备包括:

14、存储器,用于存储计算机可执行指令或者计算机程序;

15、处理器,用于执行所述存储器中存储的计算机可执行指令或者计算机程序时,实现本技术实施例提供的模型配准方法。

16、本技术实施例提供一种计算机可读存储介质,存储有计算机程序或计算机可执行指令,用于被处理器执行时实现本技术实施例提供的模型配准方法。

17、本技术实施例提供一种计算机程序产品,包括计算机程序或计算机可执行指令,所述计算机程序或计算机可执行指令被处理器执行时,实现本技术实施例提供的模型配准方法。

18、本技术实施例提供的一种模型配准方法、装置、计算机设备、计算机可读存储介质及计算机程序产品。通过获取第一三维模型中的目标对象的位置信息矩阵,以及第一三维模型划分出的各区域的第一参数信息,构建目标优化模型,目标优化模型包括用于实现全局变换的第一优化模型和用于实现分区域的局部变换第二优化模型的,以实现对目标对象的分区域参数化建模,基于第一参数信息对目标优化模型进行求解,求解出的包括全局变换矩阵、各区域的pca系数和各区域的局部变换矩阵的目标参数信息,基于第一参数信息、目标参数信息和第一优化模型,获得分区域参数化的目标混合模型,从而基于目标混合模型实现对目标对象的非刚性配准,使得目标对象的拟合或配准结果具有更高的相似度,避免出现配准结果畸形。