家庭视觉记忆图谱构建方法、装置、设备、介质及产品与流程

摘要: 本发明涉及知识图谱,尤其涉及一种家庭视觉记忆图谱构建方法、装置、设备、介质及产品。背景技术:1、随着家庭监控设备和智能家居系统的普及,家庭场景下产生了大量视频数...
家庭视觉记忆图谱构建方法、装置、设备、介质及产品与流程

本发明涉及知识图谱,尤其涉及一种家庭视觉记忆图谱构建方法、装置、设备、介质及产品。

背景技术:

1、随着家庭监控设备和智能家居系统的普及,家庭场景下产生了大量视频数据,如何从中提取结构化知识以辅助家庭成员记忆回溯与物品管理成为亟待解决的问题。现有技术中,时序知识图谱方法虽引入了时间维度,但其时间管理粒度较粗,难以精确刻画物品所属关系随时间的变化过程;家庭场景知识图谱方法中的关系多为临时控制关系,未对长期稳定的物品持有关系进行有效建模;通用监控图谱方法则未针对家庭场景中人员身份固定、物品归属长期稳定等特点进行适配。综上,现有技术缺乏对物品所属关系在时间维度上的精确表达与历史追溯能力,难以满足家庭场景下对物品归属信息的时序查询需求。

技术实现思路

1、本发明提供了一种家庭视觉记忆图谱构建方法、装置、设备、介质及产品,以解决现有技术无法表达家庭成员与物品之间带有时间属性的稳定所属关系、难以对物品归属进行历史时段精确追溯的技术问题。

2、根据本发明的一方面,提供了一种家庭视觉记忆图谱构建方法,该方法包括:

3、基于家庭场景中多个摄像头的视频分析结果,创建人员节点和物品节点以及人员节点与物品节点之间的归属关系边;归属关系边用于表征家庭成员对物品的所属关系,且归属关系边配置有时间有效性属性,时间有效性属性包括关系生效时间和关系结束时间;

4、基于人员节点、物品节点和归属关系边,构建家庭视觉记忆图谱。

5、根据本发明的另一方面,提供了一种家庭视觉记忆图谱构建装置,该装置包括:

6、实体与关系创建模块,用于基于家庭场景中多个摄像头的视频分析结果,创建人员节点和物品节点以及人员节点与物品节点之间的归属关系边;归属关系边用于表征家庭成员对物品的所属关系,且归属关系边配置有时间有效性属性,时间有效性属性包括关系生效时间和关系结束时间;

7、图谱构建模块,用于基于人员节点、物品节点和归属关系边,构建家庭视觉记忆图谱。

8、根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:

9、至少一个处理器;以及

10、与所述至少一个处理器通信连接的存储器;其中,

11、所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的家庭视觉记忆图谱构建方法。

12、根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的家庭视觉记忆图谱构建方法。

13、根据本发明的另一方面,提供了一种计算机程序产品,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现本发明任一实施例所述的家庭视觉记忆图谱构建方法。

14、本发明实施例的技术方案,通过基于家庭场景中多个摄像头的视频分析结果,创建人员节点和物品节点以及人员节点与物品节点之间的归属关系边;归属关系边用于表征家庭成员对物品的所属关系,且归属关系边配置有时间有效性属性,时间有效性属性包括关系生效时间和关系结束时间;基于人员节点、物品节点和归属关系边,构建家庭视觉记忆图谱。本方案通过为人员节点与物品节点之间的归属关系边配置时间有效性属性(包括关系生效时间和关系结束时间),使图谱能够精确表达家庭成员对物品的稳定所属关系及其随时间的变化,解决了现有技术难以对物品归属关系进行历史时段精确追溯的技术问题,实现了对任意物品在任意历史时间段内持有人的快速查询,显著提升了家庭场景下物品管理、记忆辅助等应用中对归属信息的查询准确性与实用性。

15、应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种家庭视觉记忆图谱构建方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,所述基于家庭场景中多个摄像头的视频分析结果,创建人员节点和物品节点以及所述人员节点与所述物品节点之间的归属关系边,包括:

3.根据权利要求1所述的方法,其特征在于,所述方法还包括:

4.根据权利要求3所述的方法,其特征在于,所述跨摄像头身份合并的过程,包括:

5.根据权利要求3所述的方法,其特征在于,所述跨周期身份合并的过程,包括:

6.根据权利要求1所述的方法,其特征在于,所述方法还包括:

7.根据权利要求1所述的方法,其特征在于,所述方法还包括:

8.根据权利要求1所述的方法,其特征在于,所述方法还包括:

9.根据权利要求1所述的方法,其特征在于,所述方法还包括:

10.根据权利要求1所述的方法,其特征在于,所述方法还包括:

11.一种家庭视觉记忆图谱构建装置,其特征在于,所述装置包括:

12.一种电子设备,其特征在于,所述电子设备包括:

13.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-10中任一项所述的家庭视觉记忆图谱构建方法。

14.一种计算机程序产品,其特征在于,所述计算机程序产品包括计算机程序,所述计算机程序在被处理器执行时实现权利要求1-10中任一项所述的家庭视觉记忆图谱构建方法。