对象识别方法及电子设备与流程

技术特征：
1.一种对象识别方法，其特征在于，包括：确定待识别的目标对象组，所述目标对象组中包括至少两个待识别的目标对象，所述目标对象关联有文本信息以及图像信息；将所述目标对象组中各目标对象的文本信息以及图像信息输入到目标模型中进行识别处理，得到对象识别结果；其中，所述目标模型用于，分别将各目标对象的文本特征与图像特征进行融合处理，并根据得到的各目标对象的图文交叉特征，判断各目标对象在目标属性上是否存在共性；所述目标模型中包括多模态特征融合模型，用于在执行对文本特征以及图像特征是否匹配进行判断的任务的过程中，对所述文本特征与图像特征进行融合处理，以得到所述图文交叉特征。2.根据权利要求1所述的方法，其特征在于，所述目标模型包括特征生成模型以及判别模型，所述特征生成模型中包括特征提取模型，以及多模态特征融合模型；所述特征提取模型用于：分别对各目标对象进行文本特征提取以及图像特征提取；所述多模态特征融合模型用于：将文本特征与图像特征进行融合，输出各目标对象的图文交叉特征；所述判别模型用于根据各目标对象的图文交叉特征判断各目标对象在目标属性上是否存在共性。3.根据权利要求2所述的方法，其特征在于，所述目标模型是通过将特征生成模型以及判别模型进行组合而成的成套模型。4.根据权利要求3所述的方法，其特征在于，在对所述目标模型进行训练之前，还包括：对所述特征生成模型进行训练，并根据训练结果获得所述特征生成模型中的参数学习结果；将所述参数学习结果作为对所述目标模型进行训练时的参数初始值。5.根据权利要求1所述的方法，其特征在于，还包括：提供关于目标对象在目标属性上是否存在共性的识别结果，并接收关于所述识别结果准确性的用户反馈信息，根据所述用户反馈信息对所述目标模型进行迭代训练。6.根据权利要求1至5任一项所述的方法，其特征在于，所述目标对象包括商品对象；所述确定各对象在目标属性上是否存在共性，包括：确定同一商品对象组中的各商品对象是否属于同款或相似款商品对象。7.根据权利要求6所述的方法，其特征在于，所述商品对象组中包括的至少两个商品对象对应相同的类目；所述目标模型包括对应不同类目的多个不同目标模型；所述将所述目标对象组中各目标对象的文本信息以及图像信息输入到目标模型中进行处理，包括：根据所述目标商品对象组中各商品对象所属的目标类目，将所述各商品对象的文本信息以及图像信息输入到所述目标类目对应的目标模型中进行处理。
8.根据权利要求6所述的方法，其特征在于，所述确定待识别的目标对象组，包括：在根据用户历史浏览过的商品对象进行商品对象推荐时，将该历史浏览过的商品对象与商品对象库中的其他数据对象组成多个目标商品对象组。9.根据权利要求6所述的方法，其特征在于，所述确定待识别的目标对象组，包括：在接收到用户提交的查找目标商品对象的同款/相似款商品对象的请求后，将该目标商品对象与商品对象库中的其他数据对象组成多个目标商品对象组。10.根据权利要求1至5任一项所述的方法，其特征在于，所述确定待识别的目标对象组，包括：接收用户提交的待识别对象的文本信息以及图像信息，所述图像信息是通过对待识别对象对应的实物进行图像采集后生成的；将所述待识别对象与商品对象库中的多个商品对象分别组成目标对象组；所述商品对象库中的商品对象还关联有标签，所述标签用于表征对应的商品对象是否为正品或与正品的接近程度；所述方法还包括：根据与所述待识别对象相似度符合条件的目标商品对象对应的标签，提供关于所述待识别对象是否为正品或与正品的接近程度的识别结果信息。11.一种模型处理方法，其特征在于，包括：构建图文匹配模型，所述图文匹配模型用于对图像与文本是否用于描述统一对象进行识别；获取训练样本，所述训练样本中包括多个样本条目，所述样本条目中包括图像内容以及文本内容，以及关于图像内容与文本内容是否匹配的标注信息；通过所述训练样本对所述图文匹配模型进行训练；在训练完成后，根据所述图文匹配模型中的特征融合模块，生成所述多模态特征融合模型，以用于对输入的目标对象进行图像特征提取以及文本特征提取，并将图像文本与文本特征进行融合，生成图文交叉特征。12.一种提供识别结果的方法，其特征在于，包括：接收用户提交的待识别对象的文本信息以及图像信息，所述图像信息是通过对待识别对象对应的实物进行图像采集后生成的；将所述待识别对象与商品对象库中的多个商品对象分别组成目标对象组；所述商品对象库中的商品对象还关联有标签，所述标签用于表征对应的商品对象是否为正品或与正品的接近程度；将所述目标对象组中各目标对象的文本信息以及图像信息输入到目标模型中进行处理，所述目标模型用于，分别将各目标对象的文本特征与图像特征进行融合处理，根据得到的图文交叉特征确定目标对象之间相似度；其中，所述目标模型中包括多模态特征融合模型，所述多模态特征融合模型用于在执行对文本特征以及图像特征是否匹配进行判断的任务的过程中，对所述文本特征与图像特征进行融合处理，以得到所述图文交叉特征；根据与所述待识别对象的相似度符合条件的目标商品对象对应的标签，提供关于所述
待识别对象是否为正品或与正品的接近程度的识别结果信息。13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1至12任一项所述的方法的步骤。14.一种电子设备，其特征在于，包括：一个或多个处理器；以及与所述一个或多个处理器关联的存储器，所述存储器用于存储程序指令,所述程序指令在被所述一个或多个处理器读取执行时，执行权利要求1至12任一项所述的方法的步骤。

技术总结
本申请实施例公开了对象识别方法及电子设备，所述方法包括：确定待识别的目标对象组，所述目标对象组中包括至少两个待识别的目标对象，所述目标对象关联有文本信息以及图像信息；将各目标对象的文本信息以及图像信息输入到目标模型中进行识别处理；所述目标模型用于，分别将各目标对象的文本特征与图像特征进行融合处理，并根据得到的图文交叉特征，判断各目标对象在目标属性上是否存在共性；所述目标模型中包括多模态特征融合模型，用于在执行对文本特征以及图像特征是否匹配进行判断的任务的过程中，对所述文本特征与图像特征进行融合处理。通过本申请实施例，能够对目标对象在目标属性上是否存在共性进行更准确的识别。在目标属性上是否存在共性进行更准确的识别。在目标属性上是否存在共性进行更准确的识别。


技术研发人员：章宦记 孙可嘉 李彤
受保护的技术使用者：阿里巴巴（中国）有限公司
技术研发日：2021.09.23
技术公布日：2022/1/28