引文语义功能分类方法、装置、设备、介质和产品与流程
本公开涉及数据分析,具体而言,本申请涉及一种引文语义功能分类方法、装置、设备、介质和产品。
背景技术:
1、引文指在写作或学术研究中,从其他书籍、文章、文件等资料中摘录或引用的语句、段落及观点。学术引文作为文献中知识关联关系的核心表征,其分析方法是科学计量研究和学术评价体系构建的重要基础。
2、现有引文分析工作中,国内外围绕细粒度引文展开的研究包括按照引文在文献中的语义进行分类,将引文划分为多个不同的语义功能类别,用以刻画不同类型引文在学术论证中的作用,并服务于学术影响评估、知识图谱构建与文献检索优化等应用场景。
3、引文语义功能分类方法多依赖人工预处理或商业数据库的结构化标注,通常以已切分的引文句或标注好的(extensible markup language,简称xml)文件作为输入,而人工构建标注的方式成本极高,且标注过程容易受到主观偏差和领域局限的影响。因此,现有的引文语义功能分类方法无法适用于未标注的原始文献,在大规模开放语料上的扩展性不足。
技术实现思路
1、本公开实施例提供了一种引文语义功能分类方法、装置、设备、介质和产品,可以解决现有技术的上述问题。技术方案如下:
2、根据本公开实施例的一个方面,提供了一种引文语义功能分类方法,包括:
3、获得待分析文献的语句序列;
4、将语句序列输入引文分析模型,通过引文分析模型以语句序列中每一语句间的上下文依赖关系,获得每一语句的第一语义向量,根据所有语句的第一语义向量,识别属于引文的语句;
5、对于每一引文,通过引文分析模型以引文中各个词汇间的上下文依赖关系,获得引文的第二语义向量,根据引文的第二语义向量对引文进行语义功能分类,获得引文对应的语义功能类别。
6、根据本公开实施例的另一个方面,提供了一种引文语义功能分类装置,包括:
7、语句序列获取模块,用于获得待分析文献的语句序列;
8、引文语句识别模块,用于将语句序列输入引文分析模型,通过引文分析模型以语句序列中每一语句间的上下文依赖关系,获得每一语句的第一语义向量,根据所有语句的第一语义向量,识别属于引文的语句;
9、功能类别分类模块,用于对于每一引文,通过引文分析模型以引文中各个词汇间的上下文依赖关系,获得引文的第二语义向量,根据引文的第二语义向量对引文进行语义功能分类,获得引文对应的语义功能类别。
10、根据本公开实施例的另一个方面,提供了一种电子设备,该电子设备包括存储器、处理器及存储在存储器上的计算机程序,处理器执行计算机程序以实现上述方法。
11、根据本公开实施例的再一个方面,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述方法。
12、根据本公开实施例的一个方面,提供了一种计算机程序产品,包括计算机程序,计算机程序被处理器执行时实现上述方法。
13、本公开实施例提供的技术方案带来的有益效果是:
14、引文分析模型处理串联的引文语句识别和语义功能类别分类两个子任务,实现了从原始待分析文献到引文语义功能类别的端到端自动分析,无需依赖人工预处理或结构化输入,在提升了细粒度引文分析的效率与可扩展性的同时,能够迁移应用于大规模开放语料。
1.一种引文语义功能分类方法,其特征在于,包括:
2.根据权利要求1所述的方法,其特征在于,所述以所述语句序列中每一语句间的上下文依赖关系,获得每一语句的第一语义向量,包括:
3.根据权利要求2所述的方法,其特征在于,对于每一引文,所述以所述引文中各个词汇间的上下文依赖关系,获得所述引文的第二语义向量,包括:
4.根据权利要求3所述的方法,其特征在于,每一轮编码操作,包括:
5.根据权利要求3或4所述的方法,其特征在于,所述第一编码器与所述第二编码器为同一编码器;
6.根据权利要求5所述的方法,其特征在于,所述引文分析模型通过以下方式获得:
7.根据权利要求6所述的方法,其特征在于,在本轮训练的子网络为第二子网络的情况下,所述总损失为所述样本集中所有样本文献的引文对应的损失之和;
8.根据权利要求1-4任一项所述的方法,其特征在于,所述根据所有语句的第一语义向量,识别属于引文的语句,包括:
9.根据权利要求8所述的方法,其特征在于,所述第一信息包括相邻语句标签间对应的所有标签组的转移分数,每一标签组的转移分数用于指示所述标签组中上一标签转移到下一标签的概率;
10.根据权利要求7所述的方法,其特征在于,所述样本数据集通过以下方式生成:
11.一种引文语义功能分类装置,其特征在于,包括:
12.一种电子设备,包括存储器、处理器及存储在存储器上的计算机程序,其特征在于,所述处理器执行所述计算机程序以实现权利要求1-10任一项所述方法的步骤。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-10任一项所述方法的步骤。
14.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-10任一项所述方法的步骤。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com