一种AI玩具智能体调度方法及系统与流程
本发明涉及人工智能终端交互,具体为一种ai玩具智能体调度方法及系统。
背景技术:
1、随着语音识别、自然语言处理、大语言模型和物联网通信技术的发展,儿童陪伴型智能玩具、故事机、教育玩具和陪伴机器人逐渐具备联网问答、内容播放、角色语音播报、家长端互动和后台消息推送等能力。现有ai玩具通常通过麦克风采集用户语音,再经云端语音识别、语义理解、文本生成和语音合成等链路完成交互;部分ai玩具还能够接收家长应用端或运营后台发送的消息,并在配置摄像头后实现一定的图像识别或场景理解。因此,ai玩具已经由单一语音问答设备逐步发展为包含语音输入、视觉输入、业务事件、后台消息和外部端展示的多源交互终端。
2、但是,在现有ai玩具系统中,语音问答、视觉理解、家长消息、后台推送和小程序养成事件通常由不同业务链路分别处理,缺少统一的任务对象和设备状态约束机制。当多个来源的交互输入同时到达时,系统难以根据ai玩具终端的当前播放状态、任务来源和任务优先级进行统一调度,容易出现低优先级消息打断实时对话、高优先级提醒无法及时播报、不同输入源之间上下文不一致以及同一设备多条任务执行顺序混乱的问题。由于多源交互输入没有被统一纳入同一调度链路,后续能力服务调用、回复生成、语音播报和外部端展示也容易形成相互割裂的处理结果,影响ai玩具交互过程的连续性、可控性和可追溯性。
技术实现思路
1、针对现有技术的不足,本发明提供了一种ai玩具智能体调度方法及系统,解决现有ai玩具系统中语音输入、视觉输入、家长消息、后台推送和业务事件分别处理,缺少统一任务对象和设备状态约束,导致多源交互任务执行顺序混乱、上下文不一致以及低优先级任务容易打断实时交互的问题。
2、为实现以上目的,本发明通过以下技术方案予以实现:一种ai玩具智能体调度方法,包括:
3、s1、获取交互输入,并同步获取ai玩具终端的设备状态信息,所述交互输入来源于所述ai玩具终端或者外部业务系统;
4、s2、对所述交互输入进行来源识别和内容归一化处理,生成统一任务对象,所述统一任务对象包括设备标识、任务来源、会话编号、角色标识、语言标识、任务内容和任务优先级;
5、s3、根据所述统一任务对象和所述设备状态信息确定任务执行方式,并按照所述任务执行方式确定所述统一任务对象进入能力路由流程的时间顺序;
6、s4、根据所述统一任务对象、所述设备状态信息和能力注册表筛选候选能力服务,并从所述候选能力服务中确定目标能力服务;
7、s5、调用所述目标能力服务处理所述统一任务对象,生成结构化中间结果;
8、s6、根据所述结构化中间结果、角色配置和会话上下文生成目标回复文本;
9、s7、根据所述目标回复文本同步生成玩具端播报语音和外部端展示文字,并将所述目标回复文本、所述玩具端播报语音和所述外部端展示文字关联至同一回复编号;
10、s8、当所述目标能力服务调用异常时,根据所述能力注册表中的故障回退策略切换至回退能力服务或本地兜底内容,并保持所述统一任务对象中的角色标识和语言标识不变。
11、优选地,所述设备状态信息包括当前角色、当前语言、当前播放状态、在线状态、摄像头可用状态、网络连接状态和最近交互时间中的至少一种;所述当前播放状态包括空闲状态、监听状态、播报状态和对话状态中的至少一种。
12、优选地,所述任务执行方式包括立即执行、排队等待、延后播报、合并播报或者抢占播报;确定所述任务执行方式的步骤包括:根据所述任务来源识别所述统一任务对象对应的任务类别;根据所述任务类别和所述任务内容确定所述任务优先级;根据所述任务优先级和所述当前播放状态确定所述任务执行方式。
13、优选地,所述能力注册表包括能力服务的服务标识、服务地址、鉴权信息、启停状态、支持任务类型、支持语言、支持角色、支持场景、服务优先级、超时阈值和故障回退策略。
14、优选地,从所述候选能力服务中确定目标能力服务的步骤包括:剔除与所述任务类别、所述语言标识、所述角色标识、所述设备状态信息或所述启停状态不匹配的能力服务,得到所述候选能力服务;根据任务类型匹配程度、设备能力匹配程度、角色匹配程度、语言匹配程度、服务健康状态和服务响应时延计算所述候选能力服务的服务匹配评分;选择所述服务匹配评分最高且满足所述超时阈值的候选能力服务作为所述目标能力服务。
15、优选地,当所述统一任务对象对应用户语音输入时,将所述用户语音输入转换为用户文本;在所述用户文本命中视觉触发词且所述设备状态信息表征所述ai玩具终端具备视觉采集能力时,控制所述ai玩具终端执行单次抓拍或单次取帧,得到视觉输入数据;将所述视觉输入数据输入视觉理解服务,输出结构化视觉结果,并将所述结构化视觉结果作为所述结构化中间结果的组成部分。
16、优选地,所述结构化中间结果包括结果类型、来源标识、结果内容、置信标识、输出约束和任务时间;生成所述目标回复文本的步骤包括:将所述结构化中间结果与所述会话上下文组合成回复生成输入;根据所述角色配置和所述语言标识确定回复风格约束;基于所述回复生成输入和所述回复风格约束生成所述目标回复文本。
17、优选地,根据所述目标回复文本同步生成玩具端播报语音和外部端展示文字的步骤包括:为所述目标回复文本生成所述回复编号;将所述目标回复文本输入语音合成服务,生成所述玩具端播报语音;将所述目标回复文本作为所述外部端展示文字发送至家长app、运营后台或小程序养成系统;将所述设备标识、所述会话编号、所述回复编号、所述玩具端播报语音和所述外部端展示文字写入会话记录。
18、优选地,所述目标能力服务调用异常包括调用失败、响应超时、鉴权失败、服务关闭或者返回内容为空;根据所述故障回退策略切换至回退能力服务或本地兜底内容的步骤包括:读取所述目标能力服务对应的故障回退策略;根据所述故障回退策略确定所述回退能力服务;当所述回退能力服务不可用时,调用所述本地兜底内容;将调用异常信息和回退处理结果关联至所述会话记录。
19、本发明还提供一种ai玩具智能体调度系统,包括:
20、ai玩具终端,用于采集用户语音、播放玩具端播报语音,并在接收到视觉采集指令时执行单次抓拍或单次取帧;
21、设备状态管理模块,用于维护所述ai玩具终端的设备状态信息;
22、入口解析模块,用于获取交互输入,并对所述交互输入进行来源识别和内容归一化处理,生成统一任务对象;
23、事件与消息调度模块,用于根据所述统一任务对象和所述设备状态信息确定任务执行方式,并按照所述任务执行方式确定所述统一任务对象进入能力路由流程的时间顺序;
24、能力注册模块,用于维护能力注册表;
25、能力路由模块,用于根据所述统一任务对象、所述设备状态信息和所述能力注册表筛选候选能力服务,并从所述候选能力服务中确定目标能力服务;
26、多模态结果生成模块,用于调用所述目标能力服务处理所述统一任务对象,生成结构化中间结果;
27、回复生成模块,用于根据所述结构化中间结果、角色配置和会话上下文生成目标回复文本;
28、同源输出模块,用于根据所述目标回复文本同步生成所述玩具端播报语音和外部端展示文字,并将所述目标回复文本、所述玩具端播报语音和所述外部端展示文字关联至同一回复编号;
29、故障回退模块,用于在所述目标能力服务调用异常时,根据所述能力注册表中的故障回退策略切换至回退能力服务或本地兜底内容。
30、本发明提供了一种ai玩具智能体调度方法及系统。具备以下有益效果:
31、1、本发明通过对ai玩具终端和外部业务系统产生的交互输入进行来源识别和内容归一化处理,生成包含设备标识、任务来源、会话编号、角色标识、语言标识、任务内容和任务优先级的统一任务对象,并结合设备状态信息确定立即执行、排队等待、延后播报、合并播报或抢占播报等任务执行方式,使语音输入、视觉输入、家长消息、后台推送和小程序养成事件能够进入同一调度链路。由此,系统能够根据当前播放状态和任务优先级合理确定任务进入能力路由流程的时间顺序,避免低优先级任务打断实时对话,也避免高优先级任务无法及时处理,提升了ai玩具多源交互任务编排的有序性和连续性。
32、2、本发明通过能力注册表记录能力服务的服务标识、启停状态、支持任务类型、支持语言、支持角色、支持场景、服务优先级、超时阈值和故障回退策略,并基于统一任务对象、设备状态信息和能力注册表筛选候选能力服务、确定目标能力服务,使新增视觉理解、品牌知识、联网搜索、语言能力或业务联动服务时无需改动主流程逻辑。由此,降低了ai玩具能力扩展和维护成本,提高了系统对不同设备类型、不同角色配置和不同语言场景的适配能力。
33、3、本发明通过将目标能力服务返回的处理结果转换为结构化中间结果,再结合角色配置和会话上下文生成目标回复文本,使不同能力服务的输出能够以统一数据结构进入回复生成流程。由此,避免不同能力服务直接输出最终内容导致的格式不一致和上下文不连续问题,有利于保证不同任务来源下回复内容的角色风格、语言风格和会话语义的一致性。
34、4、本发明通过目标回复文本同步生成玩具端播报语音和外部端展示文字,并将目标回复文本、玩具端播报语音和外部端展示文字关联至同一回复编号,使ai玩具终端实际播报内容与家长app、运营后台或小程序养成系统显示内容具有同一文本来源。由此,避免语音播报后再另行生成展示文字造成的语义偏差,提升了交互记录的可追溯性和外部端查看内容的可信度。
35、5、本发明在用户语音输入命中视觉触发词且设备状态信息表征ai玩具终端具备视觉采集能力时,才控制ai玩具终端执行单次抓拍或单次取帧,并将视觉理解服务输出的结构化视觉结果并入结构化中间结果。由此,视觉理解不需要持续开启摄像头,能够减少无效图像采集带来的功耗和隐私暴露风险,同时通过结构化视觉结果保证视觉理解内容能够稳定进入回复生成流程。
36、6、本发明在目标能力服务发生调用失败、响应超时、鉴权失败、服务关闭或返回内容为空等调用异常时,根据能力注册表中的故障回退策略切换至回退能力服务或本地兜底内容,并保持统一任务对象中的角色标识和语言标识不变。由此,即使部分能力服务不可用,也能够保持对话链路连续,避免ai玩具终端出现静默、直接报错或角色语言突变的问题。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com