一种汽车座舱中潜在意图的识别方法、系统和装置与流程
本发明涉及智能座舱人机交互,具体为一种汽车座舱中潜在意图的识别方法、系统和装置。
背景技术:
1、汽车智能化已成为推动产业升级和产品竞争力提升的关键方向,从应用场景来看,汽车智能化主要涵盖智能驾驶与智能座舱两大领域,智能驾驶聚焦高级驾驶辅助与自动驾驶能力建设,旨在提升车辆行驶安全性、降低驾驶负担并优化出行效率;智能座舱则面向座舱控制、人机交互及乘员体验等核心环节,通过智能化功能与场景化服务提升用车的舒适性、便利性和整体体验。
2、当前座舱意图识别技术主要分为两类:
3、基于固定指令词库 + 传统 nlp 识别方案:仅能匹配固定话术执行对应功能,识别精度高、运算速度快,但召回率低、误触发频发,仅被动响应指令,无法挖掘隐含需求,智能化程度低;
4、基于微调大模型的语义识别方案:语义召回、识别精度优于传统 nlp 方案,但仍局限于解析用户显性指令,未结合车辆实时运行状态、驾乘人员生理状态、环境信息做关联推理,只能被动执行用户明确指令,不能主动挖掘场景化潜在意图,交互体验存在明显短板。
5、综上,现有技术仅能解析用户显性主意图,缺少结合车辆、人员、环境多维数据关联推理潜在意图的完整技术方案,无法实现座舱主动智能服务。
技术实现思路
1、本发明的目的在于提供一种汽车座舱中潜在意图的识别方法、系统和装置,以解决上述背景技术中提出的问题。
2、本发明提供如下技术方案:一种汽车座舱中潜在意图的识别方法,其特征在于,包括以下步骤:
3、s1.构建汽车座舱意图知识图谱,定义各用户意图之间的正相关、负相关关联关系,并针对每一类意图构建对应的场景特征集合;
4、s2.基于座舱交互样本训练主意图识别模型;
5、s3.通过与车机连通的硬件终端同步采集多维度感知数据,所述多维度感知数据包括车辆状态数据、行驶动态数据、驾乘人员状态数据、车外环境数据;
6、s4.接收用户输入指令,通过所述主意图识别模型识别用户主意图,并控制车机执行所述主意图对应的座舱功能;
7、s5.以所述主意图为检索条件查询所述意图知识图谱,提取与主意图正相关的全部候选潜在意图;
8、s6.将步骤 s3 采集的多维度感知数据分别与各候选潜在意图的场景特征集合进行匹配,计算特征匹配度,筛选匹配度超过预设阈值的候选潜在意图作为有效潜在意图;
9、s7.根据预设分级策略对所述有效潜在意图执行差异化处理:舒适性类潜在意图向用户发起确认交互,收到确认指令后执行;安全监测类潜在意图后台自动执行检测,检测异常时向用户推送告警;
10、s8.采集主意图、有效潜在意图执行后的用户反馈信息,根据反馈信息评估是否迭代检索更深层级关联潜在意图,形成识别闭环。
11、一种汽车座舱中潜在意图的识别系统,用于执行权利要求 1所述的识别方法,包括:
12、a.图谱与特征库构建模块,用于构建汽车座舱意图知识图谱,并存储各意图对应的场景特征集合;其中,用于构建座舱意图知识图谱,定义意图正负相关关联关系,为每类意图构建场景特征集合并存储至数据库。
13、b.多模态感知采集模块,用于采集车辆、行驶、驾乘人员、环境多维度原始感知数据;其中,包含车机数据交互单元、定位姿态传感单元、乘员感知单元、环境传感单元,负责同步采集车辆、行驶、驾乘人员、环境多维原始数据。
14、c.意图识别与推理模块,内置训练完成的主意图识别模型与知识图谱推理引擎,用于解析用户主意图、匹配筛选有效潜在意图;其中,内置训练完成的主意图识别模型,用于解析用户显性指令;内置知识图谱推理引擎,根据主意图检索候选潜在意图,结合感知数据特征匹配度筛选有效潜在意图。
15、d.智能执行与反馈闭环模块,存储意图分级执行策略,区分询问确认、后台自动执行两种处理模式,并采集用户反馈回流至意图识别与推理模块迭代推理逻辑;其中,配置意图分级执行策略库,区分询问确认、后台自动执行两种处理逻辑;采集用户交互反馈,将反馈数据回流至意图识别与推理模块,实现潜在意图迭代挖掘。
16、一种汽车座舱中潜在意图的识别装置,包括域控制器本体、多源感知硬件组、人机交互输出单元、存储单元:
17、所述域控制器本体搭载上述识别系统;
18、所述多源感知硬件组包括卫星定位模块、姿态传感器、车载麦克风、毫米波雷达、车内摄像头、can 总线交互接口、环境温光传感器;
19、所述人机交互输出单元包括中控显示屏、语音播报喇叭、仪表告警指示灯;
20、所述存储单元用于存储意图知识图谱、场景特征集合、主意图识别模型权重及用户交互反馈数据。
21、作为优化,所述场景特征集合包含车辆行驶特征、车身故障特征、驾乘人员生理特征、温光环境特征。
22、与现有技术相比,本发明的有益效果是:
23、该汽车座舱中潜在意图的识别方法、系统和装置,将汽车座舱内的智能化服务从被动指令执行,升级为主动挖掘潜在的重要需求,为汽车用户提供更加专业周到的服务。例如用户提出“调低空调温度”时,基于意图指示图谱能够发现“关闭车顶遮阳帘”的潜在需求,提升用户的用车体验,通过将硬件终端收集信息与意图特征集合进行匹配,计算匹配度,提高潜在意图识别的准确度,因为潜在意图并不能从用户指令中直接得出,而是要根据当时的用车情况而定比如用户提出“调低空调温度”时,可能的潜在需求有播放动感音乐、胎压检查等,根据硬件终端收集的信息,用户当前并不疲劳,但车辆颠簸较严重,室外温度较高,这是根据意图特征库匹配,就会准确识别出需要进行“胎压检查”,借助“潜在需求”的智能分析和执行模块,在发现“潜在需求”后,可以自行判断直接自动执行还是向用户询问确认,极大简化用户的交互动作,体现出智能化主动服务的价值,比如识别出“关闭车顶遮阳帘”的潜在需求,系统会主动向用户确认后再操作;识别出“胎压检查”的潜在需求后,系统会在后台自动执行,如果反馈信息有异常再向用户进行提醒。
1.一种汽车座舱中潜在意图的识别方法,其特征在于,包括以下步骤:
2.一种汽车座舱中潜在意图的识别系统,其特征在于,用于执行权利要求 1所述的识别方法,包括:
3.一种汽车座舱中潜在意图的识别装置,其特征在于,包括域控制器本体、多源感知硬件组、人机交互输出单元、存储单元:
4.根据权利要求1所述的汽车座舱中潜在意图的识别方法、系统和装置,其特征在于:所述场景特征集合包含车辆行驶特征、车身故障特征、驾乘人员生理特征、温光环境特征。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com