基于本体增强生成的多模态数据智能标注方法及装置与流程

本文件涉及多模态数据智能处理、领域本体、人工智能生成、态势地图可视化、数据标注与语义融合，尤其涉及一种基于本体增强生成的多模态数据智能标注方法及装置。

背景技术：

1、在态势感知、情报研判、应急指挥等场景中，现有系统已能够通过数据接入、ai识别、规则模板和gis图层配置，实现目标、事件、轨迹、区域等信息的采集处理和可视化展示，但仍存在以下不足：

2、其一，现有数据上图多采用“数据记录—地图图层”的直接映射方式，能够解决显示问题，但难以表达数据对应的现实业务对象、事件含义、关系结构和业务约束，地图展示容易停留在数据可视化层面。

3、其二，多源多模态数据缺少统一语义承载模型。同一现实对象在雷达数据中可能表现为航迹，在遥感数据中表现为影像目标，在情报报告中表现为文字描述，在地图系统中表现为点位或图标，容易形成重复标注、割裂展示、误关联或漏关联。ai模型虽能生成候选实体、事件和标绘建议，但存在标签不统一、结构不稳定、关系不清晰、对象归并不可靠等问题。

4、其三，现有态势图层或ai标注结果缺少面向业务对象的证据链、处理链和语义资产沉淀机制，难以追溯对象来源、支撑证据、处理过程、地图要素生成依据及后续更新撤销方式。即使在内部固定数据链路中，结果也多停留在数据类型、传感器类型或图层类型层面，难以形成可复用、可解释、可追溯的统一态势语义资产。

5、因此，需要将本体中的对象、关系、函数、操作等语义要素与ai生成能力、多模态标注能力和地图表达能力结合，实现从原始多模态数据到统一态势对象、关系网络、地图表达和证据链的闭环处理。

技术实现思路

1、本发明的目的在于提供一种基于本体增强生成的多模态数据智能标注方法及装置，旨在解决现有技术中的多模态数据智能标注及态势上图过程中存在的语义口径不统一、对象难以归并、跨模态证据难以关联、上图表达缺少业务语义、标注结果难以追溯和复用等技术问题。

2、本发明提供一种基于本体增强生成的多模态数据智能标注方法，包括：

3、获取多源多模态数据，对所述多源多模态数据进行预处理，生成候选数据单元；

4、调用预先构建的领域本体语义空间，其中，所述本体语义空间中的本体是提供统一对象、关系、属性、约束、函数挂接和证据组织的服务；

5、获取对候选数据单元生成的候选标注结果，将候选标注结果映射到领域本体语义空间，得到本体对象、关系、属性、函数和操作的匹配结果，并对所述匹配结果进行约束校验；

6、对多个本体化的候选标注结果进行同一对象判断，进行跨模态态势要素融合与对象归并，形成统一态势要素；

7、根据统一态势要素生成地图表达配置。

8、本发明提供一种基于本体增强生成的多模态数据智能标注装置，包括：

9、预处理模块，用于获取多源多模态数据，对所述多源多模态数据进行预处理，生成候选数据单元；

10、调用模块，用于调用预先构建的领域本体语义空间，其中，所述本体语义空间中的本体是提供统一对象、关系、属性、约束、函数挂接和证据组织的服务；

11、映射模块，用于获取对候选数据单元生成的候选标注结果，将候选标注结果映射到领域本体语义空间，得到本体对象、关系、属性、函数和操作的匹配结果，并对所述匹配结果进行约束校验；

12、融合模块，用于对多个本体化的候选标注结果进行同一对象判断，进行跨模态态势要素融合与对象归并，形成统一态势要素；

13、生成模块，用于根据统一态势要素生成地图表达配置。

14、本发明实施例还提供一种电子设备，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现上述基于本体增强生成的多模态数据智能标注方法的步骤。

15、本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有信息传递的实现程序，所述程序被处理器执行时实现上述基于本体增强生成的多模态数据智能标注方法的步骤。

16、采用本发明实施例，能够使多模态数据智能标注不再停留于孤立标签或一次性地图标绘，而是形成可理解、可计算、可交互、可追溯、可复用的对象化语义标注结果。

1.一种基于本体增强生成的多模态数据智能标注方法，其特征在于，包括：

2.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：

3.根据权利要求1所述的方法，其特征在于，获取多源多模态数据，对所述多源多模态数据进行预处理，生成候选数据单元具体包括：

4.根据权利要求1所述的方法，其特征在于，调用预先构建的领域本体语义空间具体包括：

5.根据权利要求1所述的方法，其特征在于，获取对候选数据单元生成的候选标注结果，将候选标注结果映射到领域本体语义空间，得到本体对象、关系、属性、函数和操作的匹配结果，并对所述匹配结果进行约束校验具体包括：

6.根据权利要求1所述的方法，其特征在于，对多个本体化的候选标注结果进行同一对象判断，进行跨模态态势要素融合与对象归并，形成统一态势要素具体包括：

7.根据权利要求1所述的方法，其特征在于，根据统一态势要素生成地图表达配置具体包括：

8.一种基于本体增强生成的多模态数据智能标注装置，其特征在于，包括：

9.一种电子设备，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的基于本体增强生成的多模态数据智能标注方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有信息传递的实现程序，所述程序被处理器执行时实现如权利要求1至7中任一项所述的基于本体增强生成的多模态数据智能标注方法的步骤。