对象三维重建方法、装置、电子设备及存储介质与流程

技术特征：
1.一种对象三维重建方法，其特征在于，包括：获取二维目标图像包含的对象中各个部位的关键信息，其中所述关键信息包括关键点和/或蒙版图像；基于所述关键信息，获得由第一差异和第二差异确定的损失函数，其中所述第一差异为根据所述对象的三维目标网格在二维空间的投影确定的关键信息与根据所述二维目标图像获取的关键信息之间的差异，所述第二差异为所述三维目标网格中各个顶点与相邻顶点的相对位置，与所述对象的预设三维网格中各个顶点与相邻顶点的相对位置之间的差异；确定所述损失函数取最小值时所使用的三维目标网格中各个顶点的位置坐标；根据确定的各个顶点的位置坐标进行三维重建，生成与所述对象对应的三维模型。2.如权利要求1所述的方法，其特征在于，所述二维目标图像是按照预设图层次序将所述各个部位的分层图像叠加得到的，每个所述分层图像包括至少一个对象的部位，不同的分层图像包括的部位不同；所述获取二维目标图像包含的对象中各个部位的关键信息，包括：获取所述二维目标图像包含的对象中各个部位的分层图像，其中所述各个部位的分层图像是根据预设的各个部位的分层模板生成的；从所述各个部位的分层图像中提取与各个部位对应的关键信息。3.如权利要求1所述的方法，其特征在于，所述获取二维目标图像包含的对象中各个部位的关键信息，包括：针对任意一个部位，将所述二维目标图像中与所述部位对应的图像转换为蒙版图像，并将所述蒙版图像作为所述部位的关键信息；或针对任意一个部位，提取所述部位在所述二维目标图像中对应的关键点，并将提取的关键点作为所述部位的关键信息。4.如权利要求3所述的方法，其特征在于，在所述基于所述关键信息，获得由第一差异和第二差异确定的损失函数之前，还包括：若所有部位的关键信息都为蒙版图像，则将各个部位对应的第一蒙版向量和第二蒙版向量的距离之和作为所述第一差异；其中，部位对应的第一蒙版向量为根据所述投影获得的所述部位的蒙版图像中所有像素点的位置坐标组合得到的，部位对应的第二蒙版向量为根据所述二维目标图像获得的所述部位的蒙版图像中所有像素点的位置坐标组合得到的。5.如权利要求3所述的方法，其特征在于，在所述基于所述关键信息，获得由第一差异和第二差异确定的损失函数之前，还包括：若所有部位的关键信息都为关键点，则将各个部位对应的第一位置向量和第二位置向量的距离之和作为所述第一差异；其中，部位对应的第一位置向量是根据所述投影获得的所述部位的关键点的位置向量，部位对应的第二位置向量是根据所述二维目标图像获得的所述部位的关键点的位置向量。6.如权利要求3所述的方法，其特征在于，在所述基于所述关键信息，获得由第一差异和第二差异确定的损失函数之前，还包括：若所有部位中第一目标部位的关键信息为蒙版图像，第二目标部位的关键信息为关键点，则将各个第一目标部位对应的第一蒙版向量与第二蒙版向量的距离之和作为蒙版差
异，以及将各个第二目标部位对应的第一位置向量与第二位置向量的距离之和作为关键点差异，并根据所述蒙版差异和所述关键点差异确定所述第一差异。7.如权利要求6所述的方法，其特征在于，在所述基于所述关键信息，获得由第一差异和第二差异确定的损失函数之前，还包括：针对任意一个部位，确定所述部位在所述二维目标图像中所占的面积；若所述部位所占的面积大于预设阈值，则确定所述部位为第一目标部位；若所述部位所占的面积不大于预设阈值，则确定所述部位为第二目标部位。8.一种对象三维重建装置，其特征在于，包括：信息获取单元，被配置为执行获取二维目标图像包含的对象中各个部位的关键信息，其中所述关键信息包括关键点和/或蒙版图像；函数构建单元，被配置为执行基于所述关键信息，获得由第一差异和第二差异确定的损失函数，其中所述第一差异为根据所述对象的三维目标网格在二维空间的投影确定的关键信息与根据所述二维目标图像获取的关键信息之间的差异，所述第二差异为所述三维目标网格中各个顶点与相邻顶点的相对位置，与所述对象的预设三维网格中各个顶点与相邻顶点的相对位置之间的差异；顶点确定单元，被配置为执行确定所述损失函数取最小值时所使用的三维目标网格中各个顶点的位置坐标；三维重建单元，被配置为执行根据确定的各个顶点的位置坐标进行三维重建，生成与所述对象对应的三维模型。9.一种电子设备，其特征在于，包括：处理器；用于存储所述处理器可执行指令的存储器；其中，所述处理器被配置为执行所述指令，以实现如权利要求1至权利要求7中任一项所述的对象三维重建方法。10.一种存储介质，其特征在于，当所述存储介质中的指令由电子设备的处理器执行时，使得所述电子设备能够执行如权利要求1至权利要求7中任一项所述的对象三维重建方法。

技术总结
本公开是一种对象三维重建方法、装置、电子设备及存储介质，涉及计算机视觉技术领域，用以解决对象三维重建效率低的问题。本公开方法包括：获取二维目标图像中对象各部位关键信息；基于关键信息获得第一差异和第二差异确定的损失函数，第一差异为根据三维目标网格投影确定的关键信息与根据二维目标图像获取的关键信息的差异，第二差异为三维目标网格中各顶点与相邻顶点的相对位置，与预设三维网格中各顶点与相邻顶点的相对位置的差异；根据损失函数取最小值时使用的三维目标网格中各顶点的位置坐标三维重建，生成与对象对应的三维模型。由于本公开并非直接在三维空间构建三维模型，而是基于二维图像获取三维网格，进而生成三维模型，效率更高。效率更高。效率更高。


技术研发人员：马里千 张国鑫 孙佳佳 张博宁
受保护的技术使用者：北京达佳互联信息技术有限公司
技术研发日：2020.04.28
技术公布日：2021/10/28