虚拟世界的虚拟形象处理方法及装置与流程

技术特征：
1.一种虚拟世界的虚拟形象处理方法，包括：对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征；对所述用户的多视角图像进行特征提取，获得身份特征和图像属性特征；基于所述编辑属性特征、所述身份特征和所述图像属性特征进行图像重建，获得目标虚拟形象，并将所述目标虚拟形象渲染输出至所述虚拟世界的接入设备。2.根据权利要求1所述的虚拟世界的虚拟形象处理方法，所述脱敏虚拟形象，通过将所述多视角图像输入第一解耦重建模型进行图像重建后生成；其中，所述第一解耦重建模型进行的图像重建，包括：将所述多视角图像输入第一编码器进行特征解耦和特征提取，输出第一身份特征和第一属性特征；将第一身份特征和第一属性特征输入第一解码器进行三维图像重建，输出所述脱敏虚拟形象。3.根据权利要求2所述的虚拟世界的虚拟形象处理方法，所述第一解耦重建模型，采用如下方式进行训练：将第一训练样本集中的多视角图像样本输入第一待训练模型进行图像重建，输出第一图像重建结果；基于所述第一图像重建结果和所述多视角图像样本对应的第一样本标签计算第一训练损失，并基于第一训练损失更新所述第一待训练模型的训练参数。4.根据权利要求3所述的虚拟世界的虚拟形象处理方法，所述第一待训练模型进行的图像重建，包括：将所述多视角图像样本输入第一编码器进行特征解耦和特征提取，输出第一训练身份特征和第一训练属性特征；将输出的第一训练身份特征和第一训练属性特征输入第一解码器进行三维图像重建，输出第一训练虚拟形象；将所述多视角图像样本中任一视角图像，以及所述第一训练虚拟形象在对应视角的虚拟图像输入第一身份识别网络进行身份识别，输出第一样本身份特征和第一虚拟身份特征。5.根据权利要求3所述的虚拟世界的虚拟形象处理方法，所述基于所述第一图像重建结果和所述多视角图像样本对应的第一样本标签计算第一训练损失，包括：基于第一训练属性特征和所述第一样本标签计算第一特征损失；基于第一样本身份特征和第一虚拟身份特征计算第一身份识别损失，并将所述第一特征损失与所述第一身份识别损失的差值作为所述第一训练损失。6.根据权利要求3或5所述的虚拟世界的虚拟形象处理方法，所述第一样本标签，采用如下方式确定：对三维用户图像和彩色用户图像进行图像建模，获得三维形象模板；将所述三维形象模板输入图像增强网络进行图像增强，将输出的增强后的增强图像特征作为所述第一样本标签。7.根据权利要求1所述的虚拟世界的虚拟形象处理方法，所述方法由第二解耦重建模
型执行，所述第二解耦重建模型，包括词编码网络、第二编码器和第二解码器；其中，所述词编码网络对输入的所述编辑关键词的词向量进行特征提取输出所述编辑属性特征；所述第二编码器对所述多视角图像进行特征解耦和特征提取，输出所述身份特征和所述图像属性特征；所述第二解码器基于输入的所述编辑属性特征、所述身份特征和所述图像属性特征进行三维图像重建，输出所述目标虚拟形象。8.根据权利要求7所述的虚拟世界的虚拟形象处理方法，所述第二解耦重建模型，采用如下方式进行训练：将第二训练样本集中的训练样本输入第二待训练模型进行图像重建，输出第二图像重建结果；基于所述第二图像重建结果和所述训练样本对应的第二样本标签计算第二训练损失，并基于所述第二训练损失更新所述第二待训练模型的训练参数。9.根据权利要求8所述的虚拟世界的虚拟形象处理方法，所述第二待训练模型进行的图像重建，包括：将所述训练样本携带的编辑关键词输入词编码网络进行特征提取，输出编辑属性特征；将所述训练样本携带的多视角图像输入第二编码器进行特征解耦提取，输出第二身份特征和第二属性特征；将输出的编辑属性特征、图像身份特征和属性特征输入第二解码器进行图像重建处理，输出第二训练虚拟形象；将多视角图像中任一视角图像，以及所述第二训练虚拟形象在对应视角的虚拟图像输入第二身份识别网络进行身份识别，输出第二样本身份特征和第二虚拟身份特征。10.根据权利要求8所述的虚拟世界的虚拟形象处理方法，所述基于所述第二图像重建结果和所述训练样本对应的第二样本标签计算第二训练损失，包括：基于词编码网络输出的编辑属性特征、第二编码器输出的第二属性特征和所述第二样本标签计算第二特征损失；基于第二样本身份特征和第二虚拟身份特征计算第二身份识别损失，并将所述第二特征损失与所述第二身份识别损失的差值作为所述第二训练损失。11.根据权利要求1所述的虚拟世界的虚拟形象处理方法，所述对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征步骤执行之前，还包括：对所述多视角图像进行特征解耦和特征提取，获得第一身份特征和第一属性特征；基于所述第一身份特征和所述第一属性特征进行图像重建，获得所述脱敏虚拟形象，并将所述脱敏虚拟形象渲染输出至所述接入设备。12.根据权利要求11所述的虚拟世界的虚拟形象处理方法，所述基于所述第一身份特征和所述第一属性特征进行图像重建，获得所述脱敏虚拟形象，包括：将所述第一身份特征和所述第一属性特征输入神经辐射场模型进行所述虚拟世界的三维图像重建，将输出的所述虚拟世界中的三维用户图像作为脱敏虚拟形象。
13.根据权利要求1所述的虚拟世界的虚拟形象处理方法，所述目标虚拟形象与所述用户具有身份映射，所述用户基于所述身份映射在所述虚拟世界中通过生成非同质化标识进行虚拟资产的交易，并通过交易占有虚拟资产的所有权。14.一种虚拟世界的虚拟形象处理装置，包括：编辑特征提取模块，被配置为对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征；图像特征提取模块，被配置为对所述用户的多视角图像进行特征提取，获得身份特征和图像属性特征；图像重建模块，被配置为基于所述编辑属性特征、所述身份特征和所述图像属性特征进行图像重建，获得目标虚拟形象，并将所述目标虚拟形象渲染输出至所述虚拟世界的接入设备。15.一种虚拟世界的虚拟形象处理设备，包括：处理器；以及，被配置为存储计算机可执行指令的存储器，所述计算机可执行指令在被执行时使所述处理器：对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征；对所述用户的多视角图像进行特征提取，获得身份特征和图像属性特征；基于所述编辑属性特征、所述身份特征和所述图像属性特征进行图像重建，获得目标虚拟形象，并将所述目标虚拟形象渲染输出至所述虚拟世界的接入设备。16.一种存储介质，用于存储计算机可执行指令，所述计算机可执行指令在被处理器执行时实现以下流程：对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征；对所述用户的多视角图像进行特征提取，获得身份特征和图像属性特征；基于所述编辑属性特征、所述身份特征和所述图像属性特征进行图像重建，获得目标虚拟形象，并将所述目标虚拟形象渲染输出至所述虚拟世界的接入设备。

技术总结
本说明书实施例提供了虚拟世界的虚拟形象处理方法及装置，其中，一种虚拟世界的虚拟形象处理方法包括：对用户针对虚拟世界内的脱敏虚拟形象输入的编辑关键词进行特征提取，获得编辑属性特征；对所述用户的多视角图像进行特征提取，获得身份特征和图像属性特征；基于所述编辑属性特征、所述身份特征和所述图像属性特征进行图像重建，获得目标虚拟形象，并将所述目标虚拟形象渲染输出至所述虚拟世界的接入设备。接入设备。接入设备。


技术研发人员：曹佳炯 丁菁汀
受保护的技术使用者：支付宝（杭州）信息技术有限公司
技术研发日：2022.08.16
技术公布日：2022/11/18