基于多模态感知的电子宠物控制方法、系统、装置及介质与流程

摘要: 本说明书涉及人机交互与人工智能设备,特别涉及一种基于多模态感知的电子宠物控制方法、系统、装置及介质。背景技术:1、目前,电子宠物或陪伴机器人通常基于预设的静态规...
基于多模态感知的电子宠物控制方法、系统、装置及介质与流程

本说明书涉及人机交互与人工智能设备,特别涉及一种基于多模态感知的电子宠物控制方法、系统、装置及介质。

背景技术:

1、目前,电子宠物或陪伴机器人通常基于预设的静态规则库进行交互反馈,其业务流程多采用条件触发逻辑,即电子宠物在接收到触觉交互信息、音频交互信息等交互数据后,将该交互数据作为动作触发条件,并映射调用固定或随机的预设动作序列进行反馈。在某些情况下,由于该类方案主要依赖即时输入信号,且对历史交互信息和长期行为特征的累积处理较为有限,电子宠物反馈的动作可能较难形成动态的个体差异;同时,该类方案对于随时间流逝及环境变化产生的状态波动模拟也可能较为不足,从而使交互体验在自然度、生命感、反馈层次以及长期使用体验方面仍有进一步改进空间。

2、因此,希望提出一种基于多模态感知的电子宠物控制方法、系统、装置及介质,以提升交互的个性化程度、拟真度和长期使用体验。

技术实现思路

1、本说明书实施例之一提供一种基于多模态感知的电子宠物控制方法,所述方法包括:获取交互数据,所述交互数据包括触觉交互信息、音频交互信息和运动姿态信息中的至少一种;基于所述交互数据,确定交互事件特征,所述交互事件特征包括交互频率、交互时长、动作类型和情感极性中的至少一种;基于所述交互事件特征和性格状态机,确定电子宠物的反馈动作序列,所述性格状态机包括状态向量集合,所述状态向量集合包括亲密度、活跃度和顺从度中的至少一种,其中,所述性格状态机基于历史交互事件特征进行累积更新得到;以及基于所述反馈动作序列,控制所述电子宠物执行交互动作。

2、本说明书实施例之一提供一种基于多模态感知的电子宠物控制系统,所述系统包括:多模态感知模块,被配置为获取交互数据,所述交互数据包括触觉交互信息、音频交互信息和运动姿态信息;提取模块,被配置为基于所述交互数据,确定交互事件特征,所述交互事件特征包括交互频率、交互时长、动作类型和情感极性;动态性格演化引擎,被配置为基于所述交互事件特征和性格状态机,确定反馈动作序列,所述性格状态机包括状态向量集合,所述状态向量集合包括亲密度、活跃度和顺从度,其中,所述性格状态机基于历史交互事件特征进行累积更新得到;以及执行模块,被配置为基于所述反馈动作序列,控制电子宠物执行交互动作。

3、本说明书实施例之一提供一种电子装置,所述装置包括至少一个处理器以及至少一个存储器;所述至少一个存储器用于存储计算机指令;所述至少一个处理器用于执行所述计算机指令中的至少部分指令以实现基于多模态感知的电子宠物控制方法。

4、本说明书实施例之一提供一种计算机可读存储介质,所述存储介质存储计算机指令,当计算机读取存储介质中的计算机指令后,计算机执行实现基于多模态感知的电子宠物控制方法。

1.一种基于多模态感知的电子宠物控制方法,其特征在于,所述方法包括:

2.根据权利要求1所述的方法,其特征在于,基于历史交互事件特征,对所述性格状态机进行累积更新,包括:

3.根据权利要求1所述的方法,其特征在于,所述反馈动作序列包括声音指令、电机驱动指令和屏幕显示指令中的至少一种;

4.根据权利要求3所述的方法,其特征在于,所述行为决策模型为分层决策树模型;

5.一种基于多模态感知的电子宠物控制系统,其特征在于,包括:

6.根据权利要求5所述的系统,其特征在于,所述动态性格演化引擎进一步被配置为:

7.根据权利要求5所述的系统,其特征在于,所述反馈动作序列包括声音指令、电机驱动指令和屏幕显示指令中的至少一种;

8.根据权利要求7所述的系统,其特征在于,所述行为决策模型为分层决策树模型;

9.一种基于多模态感知的电子宠物控制装置,其特征在于,所述装置包括至少一个处理器以及至少一个存储器;

10.一种计算机可读存储介质,其特征在于,所述存储介质存储计算机指令,当计算机读取存储介质中的计算机指令后,计算机执行如权利要求1-4中任一项所述的基于多模态感知的电子宠物控制方法。