一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

一种对象三维重建的方法、装置、电子设备及存储介质与流程

2021-10-27 14:05:00 来源:中国专利 TAG:人工智能 电子设备 重建 装置 对象

技术特征:
1.一种对象三维重建的方法,其特征在于,包括:获取包含目标对象部分区域的图像数据;基于预先确定的对象三维建模参数和所述图像数据,确定所述目标对象的三维建模参数和所述图像数据中目标对象的二维关键点的位置;将所述目标对象的三维建模参数输入预先配置的对象参数模型,拟合目标对象三维重建的临时三维对象模型,确定所述临时三维对象模型中三维关键点的位置;基于所述三维关键点的位置和所述二维关键点的位置,对预先确定的初始相机变换参数进行校准,得到满足预设要求的目标相机变换参数;基于所述目标对象的三维建模参数和所述目标相机变换参数,构建所述目标对象的对象三维模型。2.根据权利要求1所述的方法,其特征在于,所述基于预先确定的对象三维建模参数和所述图像数据,确定所述目标对象的三维建模参数和所述图像数据中目标对象的二维关键点的位置,包括:对所述图像数据进行多次处理,得到对象特征信息,所述处理包括多次卷积处理和一次池化处理;基于预先确定的对象三维建模参数和所述对象特征信息,确定所述目标对象的三维建模参数;对所述多次卷积处理的任一中间卷积结果进行预设处理,得到所述图像数据中目标对象的二维关键点的位置。3.根据权利要求2所述的方法,其特征在于,所述基于预先确定的对象三维建模参数和所述对象特征信息,确定所述目标对象的三维建模参数,包括:拼接所述预设确定的对象三维建模参数与所述对象特征信息得到初始输入特征;利用预先训练的全连接层网络模型,基于所述初始输入特征,确定所述目标对象的三维建模参数。4.根据权利要求3所述的方法,其特征在于,所述预先训练的全连接层网络模型包括第一全连接层、第二全连接层和第三全连接层;所述利用预先训练的全连接层网络模型,基于所述初始输入特征,确定所述目标对象的三维建模参数,包括:以所述初始输入特征为首次输入特征,循环执行如下步骤预设次数,将最终得到的第一参数和第二参数确定为所述目标对象的三维建模参数:将前一输出特征输入预先配置的全连接网络中用于提取特征的第一全连接层,得到第一特征;将前一输出特征输入预先配置的全连接网络中用于提取参数的第二全连接层,得到第一参数,其中,所述第一参数用来控制所述目标对象的姿势;将前一输出特征输入预先配置的全连接网络中用于提取参数的第三全连接层,得到第二参数,其中,所述第二参数用来控制所述目标对象的大小;拼接所述第一特征、所述第一参数和所述第二参数,得到输出特征。5.根据权利要求2所述的方法,其特征在于,所述对所述多次卷积处理的任一中间卷积结果进行预设处理,得到所述图像数据中目标对象的二维关键点的位置,包括:
对所述多次卷积处理的任一中间卷积结果进行预设处理,得到二维关键点热图;基于所述二维关键点热图确定所述图像数据中目标对象的二维关键点的位置。6.根据权利要求5所述的方法,其特征在于,所述预设处理包括:多次卷积处理和多次上采样处理,其中,所述卷积处理和所述上采样处理依次交替进行,且最后一次处理为卷积处理。7.根据权利要求1所述的方法,其特征在于,所述基于所述三维关键点的位置和所述二维关键点的位置,对预先确定的初始相机变换参数进行校准,得到满足预设要求的目标相机变换参数,包括:利用预先确定的初始相机变换参数,将所述三维关键点的位置转换到相机坐标系中,得到所述三维关键点在相机坐标系中的对应位置;以所述二维关键点的位置为基准,计算所述三维关键点在相机坐标系中的对应位置与所述二维关键点的位置之间的位置误差;在确定所述位置误差大于预设误差阈值时,调整所述相机变换参数,并重新计算所述位置误差,直至所述位置误差小于预设误差阈值时,将调整后的相机变换参数确定为目标相机参数。8.一种对象三维重建的装置,其特征在于,包括:获取模块,被配置为执行获取包含目标对象部分区域的图像数据;第一确定模块,被配置为执行基于预先确定的对象三维建模参数和所述图像数据,确定所述目标对象的三维建模参数和所述图像数据中目标对象的二维关键点的位置;第二确定模块,被配置为执行将所述目标对象的三维建模参数输入预先配置的对象参数模型,拟合目标对象三维重建的临时三维对象模型,确定所述临时三维对象模型中三维关键点的位置;校准模块,被配置为执行基于所述三维关键点的位置和所述二维关键点的位置,对预先确定的初始相机变换参数进行校准,得到满足预设要求的目标相机变换参数;构建模块,被配置为执行基于所述目标对象的三维建模参数和所述目标相机变换参数,构建所述目标对象的全身对象三维模型。9.一种电子设备,其特征在于,包括:处理器;用于存储所述处理器可执行指令的存储器;其中,所述处理器被配置为执行所述指令,以实现如权利要求1至7中任一项所述的对象三维重建的方法。10.一种存储介质,其特征在于,当所述存储介质中的指令由电子设备的处理器执行时,使得所述电子设备能够执行如权利要求1至7中任一项所述的对象三维重建的方法。

技术总结
本公开实施例提供一种对象三维重建的方法、装置、电子设备及存储介质,用以提高对象三维重建精度。该方法包括:获取包含目标对象部分区域的图像数据;基于预先确定的对象三维建模参数和图像数据,确定目标对象的三维建模参数和图像数据中目标对象的二维关键点的位置;将目标对象的三维建模参数输入预先配置的对象参数模型,拟合目标对象三维重建的临时三维对象模型,确定临时三维对象模型中三维关键点的位置;基于三维关键点的位置和二维关键点的位置,对预先确定的初始相机变换参数进行校准,得到满足预设要求的目标相机变换参数;基于目标对象的三维建模参数和目标相机变换参数,构建目标对象的对象三维模型。构建目标对象的对象三维模型。构建目标对象的对象三维模型。


技术研发人员:赵鑫 郑文
受保护的技术使用者:北京达佳互联信息技术有限公司
技术研发日:2020.04.24
技术公布日:2021/10/26
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献

  • 日榜
  • 周榜
  • 月榜