基于证据槽缺口约束的长文档双图协同审查方法及装置
本技术涉及计算机,特别是涉及自然语言处理,具体涉及一种基于证据槽缺口约束的长文档双图协同审查方法及装置。
背景技术:
1、目前,在工业、能源、建筑、金融、医疗等需要高严谨性的行业中,合规文档、技术规范、审查报告和业务制度的文件数量不断增加。该类文档通常篇幅较长、术语密集,并且规则依据、参数说明、适用条件和例外情形可能分散在不同章节、表格或附录中。在现有技术中,针对此类文档的长文档审核方法一般有以下几类:
2、(1)基于关键词或语义相似度的文档检索审核方法:该方法通过关键词匹配、向量检索或语义相似度计算,从长文档中召回与审核问题相关的文本片段,并基于召回内容生成审核结论。该方法实现简单、检索效率较高,但主要依赖文本相似性,难以保证规则版本、适用范围、表格依据、附录参数和例外条件等关键证据被完整纳入。
3、(2)基于规则库或知识图谱的合规审核方法:该方法通过构建规则库、实体关系或行业知识图谱,将文档内容与规则条款、实体参数及约束条件进行匹配,从而判断文档是否符合规范要求。该方法具有一定可解释性,但通常侧重规则命中或知识关联,缺少面向具体候选结论的必要证据要求建模,难以判断当前证据是否足以支撑该结论。
4、(3)基于大语言模型与多轮检索的文档审核方法:该方法将检索得到的文档片段、规则内容和审核问题输入大语言模型,由模型生成审核判断、原因说明和修改建议;当证据不足时,通过扩展查询或多轮检索补充相关内容。该方法具有较强的语言理解能力,但补证过程缺少明确约束,容易引入弱相关证据,且难以精确定位候选结论所缺失的关键证据类型。
技术实现思路
1、本技术所提供的一种基于证据槽缺口约束的长文档双图协同审查方法及装置,目的是解决现有技术中长文档审查场景下的候选结论过度依赖初始召回证据、证据缺失难以定位、补证方向不明确以及结论输出缺乏充分证据约束的问题。
2、为了实现上述目的,第一方面,本发明提供了一种基于证据槽缺口约束的长文档双图协同审查方法,包括:
3、根据预生成的待审查长文档的文档结构图以及领域知识图召回所述待审查长文档的初始证据;其中,所述文档结构图以及所述领域知识图之间设置有锚定边;
4、根据所述初始证据以及审查任务生成所述待审查长文档的证据缺口向量;
5、根据所述初始证据以及所述证据缺口向量审查所述待审查长文档。
6、在本技术一些实施例中,根据所述初始证据以及审查任务生成待审查长文档的证据缺口向量,包括:
7、根据所述初始证据以及审查任务生成候选审查结论;
8、根据所述候选审查结论生成所述待审查长文档的证据缺口向量;其中,所述证据缺口向量用于表征所述候选审查结论在结构证据、实体证据、规则证据、版本证据、适用范围证据、例外条件证据、表格证据以及反证证据上的缺失程度。
9、在本技术一些实施例中,根据所述候选审查结论生成所述待审查长文档的证据缺口向量,包括:
10、根据所述候选审查结论生成必要证据槽集合;
11、将所述初始证据映射至所述证据槽集合,判断所述必要证据槽集合中每个必要证据槽的覆盖状态;
12、根据所述覆盖状态生成所述待审查长文档的证据缺口向量。
13、在本技术一些实施例中,根据所述初始证据以及所述证据缺口向量审查所述待审查长文档,包括:
14、若根据所述证据缺口向量判断所述初始证据为不完整时,根据所述证据缺口向量的类型以及未覆盖的必要证据槽生成路径类型约束;
15、根据所述路径类型约束在所述锚定边进行补证搜索;
16、根据所述补证搜索的结果更新所述覆盖状态以及所述证据缺口向量;
17、根据更新之后的证据缺口向量确定证据完整性、支持证据强度、反证强度以及残留缺口;
18、根据所述初始证据、更新之后的覆盖状态、所述证据完整性、所述支持证据强度、所述反证强度以及所述残留缺口审查所述待审查长文档。
19、在本技术一些实施例中,生成所述文档结构图的步骤包括:
20、对所述待审查长文档进行粒度解析,确定所述待审查长文档的文档单元;其中,所述文档单元包括:章节、段落、条款、表格、表格单元以及附录;
21、根据所述文档单元生成所述文档结构图;其中,所述文档结构图用于表征所述待审查长文档的层级关系、顺序关系、引用关系、隐式关联关系以及表格文本关联关系。
22、在本技术一些实施例中,生成所述领域知识图的步骤包括:
23、根据审查规则的规则依据、适用条件以及语义关系确定所述待审查长文档的实体、参数、规则、规则版本、适用范围、例外条件以及逻辑约束;
24、根据所述实体、所述参数、所述规则、所述规则版本、所述适用范围、所述例外条件以及所述逻辑约束生成所述领域知识图。
25、第二方面,本技术提供一种基于证据槽缺口约束的长文档双图协同审查装置,该装置包括:
26、初始证据召回模块,用于根据预生成的待审查长文档的文档结构图以及领域知识图召回所述待审查长文档的初始证据;其中,所述文档结构图以及所述领域知识图之间设置有锚定边;
27、证据缺口向量生成模块,用于根据所述初始证据以及审查任务生成所述待审查长文档的证据缺口向量;
28、待审查长文档审查模块,用于根据所述初始证据以及所述证据缺口向量审查所述待审查长文档。
29、在本技术一些实施例中,证据缺口向量生成模块包括:
30、候选审查结论生成单元,用于根据所述初始证据以及审查任务生成候选审查结论;
31、证据缺口向量生成单元,用于根据所述候选审查结论生成所述待审查长文档的证据缺口向量;其中,所述证据缺口向量用于表征所述候选审查结论在结构证据、实体证据、规则证据、版本证据、适用范围证据、例外条件证据、表格证据以及反证证据上的缺失程度。
32、在本技术一些实施例中,证据缺口向量生成单元包括:
33、必要证据槽集合生成单元,用于根据所述候选审查结论生成必要证据槽集合;
34、覆盖状态判断单元,用于将所述初始证据映射至所述证据槽集合,判断所述必要证据槽集合中每个必要证据槽的覆盖状态;
35、证据缺口向量生成子单元,用于根据所述覆盖状态生成所述待审查长文档的证据缺口向量。
36、在本技术一些实施例中,待审查长文档审查模块包括:
37、路径类型约束生成单元,用于若根据所述证据缺口向量判断所述初始证据为不完整时,根据所述证据缺口向量的类型以及未覆盖的必要证据槽生成路径类型约束;
38、补证搜索单元,用于根据所述路径类型约束在所述锚定边进行补证搜索;
39、覆盖状态更新单元,用于根据所述补证搜索的结果更新所述覆盖状态以及所述证据缺口向量;
40、证据完整性确定单元,用于根据更新之后的证据缺口向量确定证据完整性、支持证据强度、反证强度以及残留缺口;
41、待审查长文档审查单元,用于根据所述初始证据、更新之后的覆盖状态、所述证据完整性、所述支持证据强度、所述反证强度以及所述残留缺口审查所述待审查长文档。
42、在本技术一些实施例中,一种基于证据槽缺口约束的长文档双图协同审查装置,还包括:
43、文档结构图生成模块,用于生成所述文档结构图;文档结构图生成模块包括:
44、文档粒度解析单元,用于对所述待审查长文档进行粒度解析,确定所述待审查长文档的文档单元;其中,所述文档单元包括:章节、段落、条款、表格、表格单元以及附录;
45、文档结构图生成单元,用于根据所述文档单元生成所述文档结构图;其中,所述文档结构图用于表征所述待审查长文档的层级关系、顺序关系、引用关系、隐式关联关系以及表格文本关联关系。
46、在本技术一些实施例中,一种基于证据槽缺口约束的长文档双图协同审查装置,还包括:
47、领域知识图生成模块,用于生成所述领域知识图;领域知识图生成模块包括:
48、实体确定单元,用于根据审查规则的规则依据、适用条件以及语义关系确定所述待审查长文档的实体、参数、规则、规则版本、适用范围、例外条件以及逻辑约束;
49、领域知识图生成单元,用于根据所述实体、所述参数、所述规则、所述规则版本、所述适用范围、所述例外条件以及所述逻辑约束生成所述领域知识图。
50、第三方面,本技术提供一种计算机程序产品,包括计算机程序/指令,该计算机程序/指令被处理器执行时实现一种基于证据槽缺口约束的长文档双图协同审查方法的步骤。
51、第四方面,本技术提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时实现基于证据槽缺口约束的长文档双图协同审查方法的步骤。
52、第五方面,本技术提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现基于证据槽缺口约束的长文档双图协同审查方法的步骤。
53、从上述描述可知,本技术实施例提供一种基于证据槽缺口约束的长文档双图协同审查方法及装置,首先,根据预生成的待审查长文档的文档结构图以及领域知识图召回待审查长文档的初始证据;其中,文档结构图以及领域知识图之间设置有锚定边;接着,根据初始证据以及审查任务生成待审查长文档的证据缺口向量;最后,根据初始证据以及证据缺口向量审查待审查长文档。
54、综上所述,本技术所提供的方法能够同时刻画长文档结构关系、领域规则约束和候选结论证据需求,在面对跨章节、跨表格、跨规则的复杂审查任务时,能够准确识别证据缺口并定向补充关键依据,从而提高长文档审核结论的准确性、可解释性和可靠性。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com