一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

内容识别方法、装置、计算机设备和存储介质与流程

2021-11-30 22:01:00 来源:中国专利 TAG:

技术特征:
1.一种内容识别方法,其特征在于,所述方法包括:确定待识别的目标内容,获取所述目标内容中的目标文本以及与所述目标文本关联的文本关联数据;对所述目标文本进行特征提取,得到文本提取特征;对所述文本关联数据进行特征提取,得到关联提取特征;对所述关联提取特征与所述文本提取特征进行关联计算,基于计算得到的特征关联度得到所述文本提取特征对应的特征关注强度,所述特征关联度与所述特征关注强度成正相关关系;基于所述特征关注强度对所述文本提取特征进行调整,得到调整文本特征;基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果。2.根据权利要求1所述的方法,其特征在于,所述基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果包括:对所述调整文本特征以及所述文本提取特征进行融合,得到融合文本特征;基于所述融合文本特征进行识别,得到所述目标内容对应的内容识别结果。3.根据权利要求2所述的方法,其特征在于,所述对所述调整文本特征以及所述文本提取特征进行融合,得到融合文本特征包括:对所述文本提取特征进行编码,得到第一编码特征,对所述调整文本特征进行编码,得到第二编码特征;将所述第一编码特征与所述第二编码特征进行融合,得到融合编码特征;基于所述融合编码特征得到所述调整文本特征对应的调整特征权重;基于所述调整特征权重对所述调整文本特征以及所述文本提取特征进行融合,得到融合文本特征。4.根据权利要求3所述的方法,其特征在于,所述第一编码特征是通过已训练的内容识别模型中的第一编码器编码得到的,所述第二编码特征是通过所述内容识别模型中的第二编码器编码得到的,所述基于所述融合编码特征得到所述调整文本特征对应的调整特征权重包括:将所述融合编码特征输入到所述内容识别模型中的目标激活层进行激活处理,得到目标激活值,将所述目标激活值作为所述调整文本特征对应的调整特征权重,所述激活层为所述第一编码器与所述第二编码器的共享激活层。5.根据权利要求3所述的方法,其特征在于,所述基于所述调整特征权重对所述调整文本特征以及所述文本提取特征进行融合,得到融合文本特征包括:基于所述调整特征权重得到所述文本提取特征对应的文本特征权重;将所述调整特征权重与所述调整文本特征进行乘积计算,得到计算后的调整文本特征;将所述文本特征权重与所述文本提取特征进行乘积计算,得到计算后的文本提取特征;将所述计算后的调整文本特征与所述计算后的文本提取特征进行相加,得到融合文本特征。6.根据权利要求1所述的方法,其特征在于,所述目标内容为目标视频;所述获取所述
目标内容中的目标文本以及与所述目标文本关联的文本关联数据包括:获取所述目标视频中目标时间对应的文本,得到目标文本;获取所述目标视频中所述目标时间对应的视频相关数据,将所述视频相关数据作为与所述目标文本关联的文本关联数据,所述视频相关数据包括视频帧或者音频帧的至少一种。7.根据权利要求6所述的方法,其特征在于,所述调整文本特征包括根据所述视频帧调整得到的第一调整文本特征以及根据所述音频帧调整得到的第二调整文本特征;所述基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果包括:将所述第一调整文本特征、所述第二调整文本特征以及所述文本提取特征进行融合,得到融合文本特征;基于所述融合文本特征进行识别,得到所述目标内容对应的内容识别结果。8.根据权利要求1所述的方法,其特征在于,所述基于所述特征关注强度对所述文本提取特征进行调整,得到调整文本特征包括:将所述特征关注强度与所述文本提取特征的各个特征值相乘,得到特征值乘积;按照所述文本提取特征中特征值的位置对所述特征值乘积进行排列,将排列得到的特征值序列作为所述调整文本特征。9.根据权利要求1所述的方法,其特征在于,所述文本提取特征为所述目标文本中的分词对应的特征;各个调整文本特征按照分词在所述目标文本的顺序形成特征序列;所述基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果包括:基于所述特征序列得到各个所述分词相对于命名实体的位置关系;基于各个所述位置关系从所述目标文本中获取目标命名实体,将所述目标命名实体作为所述目标内容对应的内容识别结果。10.根据权利要求9所述的方法,其特征在于,所述基于各个所述位置关系从所述目标文本中获取目标命名实体包括:获取位置关系为命名实体的起始位置的分词,作为命名实体起始词;将所述命名实体起始词对应的后向分词中,位置关系为处于命名实体的内部的分词作为命名实体组成词;将所述命名实体起始词与所述命名实体组成词进行组合,得到目标命名实体。11.根据权利要求10所述的方法,其特征在于,所述基于所述特征序列得到各个所述分词相对于命名实体的位置关系包括:基于所述特征序列得到各个所述分词相对于命名实体的位置关系以及所述分词对应的实体类型;所述将所述命名实体起始词对应的后向分词中,位置关系为处于命名实体的内部的分词作为命名实体组成词包括:将所述命名实体起始词对应的后向分词中,位置关系为处于命名实体的内部,且实体类型与所述命名实体起始词的类型相同的分词作为命名实体组成词。12.根据权利要求1所述的方法,其特征在于,所述对所述关联提取特征与所述文本提取特征进行关联计算,基于计算得到的特征关联度得到所述文本提取特征对应的特征关注强度包括:
将所述关联提取特征中的关联特征值与所述文本提取特征中对应位置的文本特征值进行乘积运算,得到乘积运算值;对所述乘积运算值进行统计,得到所述关联提取特征与所述文本提取特征之间的特征关联度,将所述特征关联度作为所述文本提取特征对应的特征关注强度。13.一种内容识别装置,其特征在于,所述装置包括:目标内容确定模块,用于确定待识别的目标内容,获取所述目标内容中的目标文本以及与所述目标文本关联的文本关联数据;特征提取模块,用于对所述目标文本进行特征提取,得到文本提取特征;对所述文本关联数据进行特征提取,得到关联提取特征;特征关注强度得到模块,用于对所述关联提取特征与所述文本提取特征进行关联计算,基于计算得到的特征关联度得到所述文本提取特征对应的特征关注强度,所述特征关联度与所述特征关注强度成正相关关系;调整文本特征得到模块,用于基于所述特征关注强度对所述文本提取特征进行调整,得到调整文本特征;内容识别结果得到模块,用于基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果。14.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至12中任一项所述的方法的步骤。15.一种计算机可读存储介质,存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至12中任一项所述的方法的步骤。

技术总结
本申请涉及一种内容识别方法、装置、计算机设备和存储介质。所述方法包括:获取待识别的目标内容中的目标文本以及文本关联数据;对所述目标文本进行特征提取,得到文本提取特征;对所述文本关联数据进行特征提取,得到关联提取特征;对所述关联提取特征与所述文本提取特征进行关联计算,基于计算得到的特征关联度得到特征关注强度;基于所述特征关注强度对所述文本提取特征进行调整,得到调整文本特征;基于所述调整文本特征进行识别,得到所述目标内容对应的内容识别结果。采用本方法能够提高内容识别的准确度。本申请中的内容识别结果可以是基于人工智能的内容识别模型识别得到的,本方案应用于视频识别领域中,可以提高视频识别的准确度。视频识别的准确度。视频识别的准确度。


技术研发人员:徐启东 陈小帅
受保护的技术使用者:腾讯科技(北京)有限公司
技术研发日:2021.03.26
技术公布日:2021/11/29
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献