一种物体检索方法、装置、电子设备和存储介质与流程

本发明涉及计算机应用，尤其涉及一种物体检索方法、装置、电子设备和存储介质。

背景技术：

1、随着家庭服务机器人、智能家居设备的快速普及与广泛落地，智能化居家感知与问答交互能力逐步成为行业核心发展方向，用户对家居智能系统的场景化语义问答能力提出了更高要求，不再局限于简单指令交互，期望系统能够精准响应“我的钥匙在哪”这类生活化、场景化的物体位置查询需求。

2、目前，现有智能家居及机器人视觉问答技术仍存在诸多固有缺陷，难以满足复杂居家场景下的物体定位与智能问答需求。现有相关技术普遍采用单一推理策略，仅能实现单层简单推理，无法适配居家环境中复杂、多变的交互场景，场景适配能力与推理鲁棒性较差。同时，现有主流技术方案未能实现用户长期记忆、使用习惯预测的多层整合应用，缺失长效用户行为数据支撑，导致问答推理结果贴合用户实际使用习惯的程度较低。现有物体定位问答系统高度依赖用户手动输入查询指令，无法实现自主感知、主动推理与智能应答，智能化程度不足。

技术实现思路

1、本发明提供了一种物体检索方法、装置、电子设备和存储介质，可解决现有物体检索过程无法对用户长期记忆、使用习惯预测的多层整合应用，缺失长效用户行为数据支撑，导致问答推理结果贴合用户实际使用习惯的程度较低的问题，可实现物体检索过程中的自主感知功能，提升物体检索的智能化程度。

2、根据本发明的一方面，提供了一种物体检索方法，其中，该方法包括：

3、获取物体查询请求对应的待检索目标，根据所述待检索目标在家庭监控系统的数据源获取已记录轨迹，其中，所述已记录轨迹包括当前目标移动轨迹、历史目标移动轨迹和持用者移动轨迹；

4、基于所述已记录轨迹生成所述待检索目标的物体消失位置、物体习惯位置和物体携带推测位置；

5、根据所述物体消失位置、所述物体习惯位置和所述物体携带推测位置生成语义检测结果；

6、获取所述数据源内匹配所述语义检测结果的监控图像证据，并根据所述语义检测结果和所述监控图像证据生成物体查询反馈结果。

7、根据本发明的另一方面，提供了一种物体检索装置，其中，该装置包括：

8、轨迹提取模块，用于获取物体查询请求对应的待检索目标，根据所述待检索目标在家庭监控系统的数据源获取已记录轨迹，其中，所述已记录轨迹包括当前目标移动轨迹、历史目标移动轨迹和持用者移动轨迹；

9、位置推理模块，用于基于所述已记录轨迹生成所述待检索目标的物体消失位置、物体习惯位置和物体携带推测位置；

10、语义结果模块，用于根据所述物体消失位置、所述物体习惯位置和所述物体携带推测位置生成语义检测结果；

11、查证反馈模块，用于获取所述数据源内匹配所述语义检测结果的监控图像证据，并根据所述语义检测结果和所述监控图像证据生成物体查询反馈结果。

12、根据本发明的另一方面，提供了一种电子设备，所述电子设备包括：

13、至少一个处理器；以及

14、与所述至少一个处理器通信连接的存储器；其中，

15、所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的物体检索方法。

16、根据本发明的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的物体检索方法。

17、本发明实施例的技术方案，获取用户物体查询请求对应的待检索目标，并依托家庭监控系统数据源，全面调取待检索目标对应的已记录轨迹数据，该轨迹数据完整覆盖目标当前移动轨迹、历史移动轨迹以及持用者移动轨迹，实现多维度行为数据的完整采集。在此基础上，结合多维度轨迹数据分别推演生成待检索目标的物体消失位置、物体习惯位置以及物体携带推测位置，融合瞬时运动状态、用户长期使用习惯以及人物携带行为完成多层推理，并基于三类位置信息综合生成精准的语义检测结果。进一步，本发明在数据源中匹配与语义检测结果对应的监控图像证据，通过真实监控画面完成推理结果的证据佐证，最终结合语义检测结果与监控图像证据共同生成可溯源、高可信的物体查询反馈结果。本发明通过融合历史轨迹与用户持用行为特征实现习惯位置推理，完成长期用户记忆与行为规律的深度整合，摆脱了传统物体检索高度依赖用户手动输入查询信息的局限，实现了物体检索场景下的自主感知与智能推理，显著提升居家物体检索问答的智能化程度、贴合度与推理准确性。

18、应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

1.一种物体检索方法，其特征在于，所述方法包括：

2.根据权利要求1所述方法，其特征在于，所述数据源包括家庭视觉系统、家庭机器人的定位导航系统和家庭视觉记忆存储库，所述根据所述待检索目标在家庭监控系统的数据源获取已记录轨迹，包括：

3.根据权利要求2所述方法，其特征在于，所述根据所述目标关联图像信息确定所述待检索目标的持用用户，包括：

4.根据权利要求1所述方法，其特征在于，所述基于所述已记录轨迹生成所述待检索目标的物体消失位置、物体习惯位置和物体携带推测位置，包括：

5.根据权利要求1或4所述方法，其特征在于，所述根据所述物体消失位置、所述物体习惯位置和所述物体携带推测位置生成语义检测结果，包括：

6.根据权利要求5所述方法，其特征在于，还包括：

7.根据权利要求1所述方法，其特征在于，所述获取所述数据源内匹配所述语义检测结果的监控图像证据，包括：

8.一种物体检索装置，其特征在于，所述装置包括：

9.一种电子设备，其特征在于，所述电子设备包括：

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现如权利要求1-7中任一项所述的物体检索方法。