基于多模态特征的资源流转处理方法、装置、设备及介质与流程

摘要: 本发明涉及智能决策,尤其涉及一种基于多模态特征的资源流转处理方法、装置、设备及介质。背景技术:1、现有事件处理通常需要同时处理请求信息、图像、文本、语音等多模态...
基于多模态特征的资源流转处理方法、装置、设备及介质与流程

本发明涉及智能决策,尤其涉及一种基于多模态特征的资源流转处理方法、装置、设备及介质。

背景技术:

1、现有事件处理通常需要同时处理请求信息、图像、文本、语音等多模态材料,并调用不同数据提供节点的数据进行核验。由于多模态材料与跨节点数据在来源、结构和语义表达上存在差异,现有处理方式难以对各类数据进行统一、可信的一致性核验,导致后续异常识别和综合判定仍较多依赖人工处理。

2、在金融科技业务领域,支付争议、保险业务、账户服务及其他金融业务申请通常涉及身份材料、业务凭证、语音记录、历史业务记录以及多个金融机构或服务机构提供的数据。现有平台难以对多模态材料与跨机构数据进行统一核验,也难以基于历史事件识别重复提交、内容矛盾和异常关联,影响金融业务判定和资源流转处理的效率。

3、在医疗健康业务领域,远程诊疗、健康管理、医疗服务审核及跨机构诊疗协同通常涉及病历文本、医学影像、检测结果、就诊记录和语音陈述等多种数据。由于不同医疗机构的数据结构和记录方式存在差异,现有处理方式难以对医疗健康材料与跨机构诊疗数据进行可信的一致性核验,导致医疗事件审核和处理仍较多依赖人工判断。

技术实现思路

1、本发明的主要目的在于提供一种基于多模态特征的资源流转处理方法、装置、设备及存储介质,旨在解决现有技术难以对来源异构的多模态材料、跨节点数据和历史事件数据进行统一可信核验,导致事件综合判定仍较多依赖人工处理的技术问题。

2、为实现上述目的,本发明提供一种基于多模态特征的资源流转处理方法,包括:

3、获取请求信息和多模态材料,从所述请求信息中提取实体标识和事件信息,基于所述事件信息生成事件标识,将所述事件标识与所述多模态材料关联,生成申请数据;

4、基于所述事件标识和所述申请数据从多个数据提供节点获取多源数据,通过零知识证明核验所述多源数据,生成跨节点核验数据;

5、提取所述多模态材料的多模态特征,将所述多模态特征与所述跨节点核验数据进行一致性比对,生成内容一致性结果;

6、基于所述实体标识获取历史事件数据,基于所述多模态特征、所述内容一致性结果和所述历史事件数据进行异常识别,生成异常识别结果;

7、获取与所述事件标识对应的判定数据,基于所述跨节点核验数据、所述内容一致性结果、所述异常识别结果、所述历史事件数据和所述判定数据生成综合判定结果;

8、根据所述综合判定结果进行资源流转处理或复核处理,生成分支处理数据,基于所述分支处理数据生成审计追溯数据。

9、进一步地,为实现上述目的,本发明提供一种基于多模态特征的资源流转处理装置,包括:

10、申请数据生成模块,用于获取请求信息和多模态材料,从所述请求信息中提取实体标识和事件信息,基于所述事件信息生成事件标识,将所述事件标识与所述多模态材料关联,生成申请数据;

11、跨节点核验模块,用于基于所述事件标识和所述申请数据从多个数据提供节点获取多源数据,通过零知识证明核验所述多源数据,生成跨节点核验数据;

12、内容一致性比对模块,用于提取所述多模态材料的多模态特征,将所述多模态特征与所述跨节点核验数据进行一致性比对,生成内容一致性结果;

13、异常识别模块,用于基于所述实体标识获取历史事件数据,基于所述多模态特征、所述内容一致性结果和所述历史事件数据进行异常识别,生成异常识别结果;

14、综合判定模块,用于获取与所述事件标识对应的判定数据,基于所述跨节点核验数据、所述内容一致性结果、所述异常识别结果、所述历史事件数据和所述判定数据生成综合判定结果;

15、分支处理模块,用于根据所述综合判定结果进行资源流转处理或复核处理,生成分支处理数据,基于所述分支处理数据生成审计追溯数据。

16、进一步地,为实现上述目的,本发明还提供一种计算机设备,所述计算机设备包括存储器、处理器以及存储至所述存储器上并可在所述处理器上运行的基于多模态特征的资源流转处理程序,所述基于多模态特征的资源流转处理程序被所述处理器执行时实现如上述所述的基于多模态特征的资源流转处理方法的步骤。

17、进一步地,为实现上述目的,本发明还提供一种计算机可读存储介质,所述存储介质上存储有基于多模态特征的资源流转处理程序,所述基于多模态特征的资源流转处理程序被处理器执行时实现如上所述的基于多模态特征的资源流转处理方法的步骤。

18、有益效果:本发明涉及智能决策技术领域,公开了一种基于多模态特征的资源流转处理方法、装置、设备及介质,包括:获取请求信息和多模态材料,生成事件标识和申请数据;从多个数据提供节点获取多源数据,通过零知识证明生成跨节点核验数据;提取多模态特征,并与跨节点核验数据进行一致性比对,生成内容一致性结果;基于历史事件数据进行异常识别,生成异常识别结果;根据跨节点核验数据、内容一致性结果、异常识别结果、历史事件数据和判定数据生成综合判定结果;根据综合判定结果进行资源流转处理或复核处理,并生成审计追溯数据。本发明可应用于金融科技及医疗健康等业务场景中,通过跨节点数据核验、多模态一致性比对和历史事件异常识别,为综合判定提供多源依据,并据此执行资源流转或复核处理,从而减少人工核验依赖,提高事件处理准确性和可追溯性。

1.一种基于多模态特征的资源流转处理方法,其特征在于,包括以下步骤:

2.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,获取请求信息和多模态材料,从所述请求信息中提取实体标识和事件信息,基于所述事件信息生成事件标识,将所述事件标识与所述多模态材料关联,生成申请数据,包括:

3.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,基于所述事件标识和所述申请数据从多个数据提供节点获取多源数据,通过零知识证明核验所述多源数据,生成跨节点核验数据,包括:

4.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,提取所述多模态材料的多模态特征,将所述多模态特征与所述跨节点核验数据进行一致性比对,生成内容一致性结果,包括:

5.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,基于所述实体标识获取历史事件数据,基于所述多模态特征、所述内容一致性结果和所述历史事件数据进行异常识别,生成异常识别结果,包括:

6.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,获取与所述事件标识对应的判定数据,基于所述跨节点核验数据、所述内容一致性结果、所述异常识别结果、所述历史事件数据和所述判定数据生成综合判定结果,包括:

7.如权利要求1所述的基于多模态特征的资源流转处理方法,其特征在于,根据所述综合判定结果进行资源流转处理或复核处理,生成分支处理数据,基于所述分支处理数据生成审计追溯数据,包括:

8.一种基于多模态特征的资源流转处理装置,其特征在于,所述基于多模态特征的资源流转处理装置包括:

9.一种计算机设备,其特征在于,所述计算机设备包括存储器、处理器以及存储至所述存储器上并可以在所述处理器上运行的基于多模态特征的资源流转处理程序,所述基于多模态特征的资源流转处理程序被所述处理器执行时实现如权利要求1-7中任一项所述的基于多模态特征的资源流转处理方法的步骤。

10.一种计算机可读存储介质,其特征在于,所述存储介质上存储有基于多模态特征的资源流转处理程序,所述基于多模态特征的资源流转处理程序被处理器执行时实现如权利要求1-7中任一项所述的基于多模态特征的资源流转处理方法的步骤。