智能网联汽车助手对话和形象管理系统和方法与流程

技术特征：
1.智能网联汽车助手对话和形象管理系统，包括车载主机终端和云端，其特征在于：车载主机终端接收来自云端的动作指令从而完成智能网联汽车助手形象动作执行，所述云端用于为所述智能网联汽车助手形象动作配置情感类型标签、问题类型标签以及相应的动作类型标签，并在所述动作类型标签下配置相应的形象动作资源；所述车载主机终端包括设备层和应用层，所述应用层为车载主机内所搭载的智能网联汽车助手app，用于形象动作执行、形象动作渲染和语音问答呈现；所述设备层用于智能网联汽车助手形象动作展示；所述云端包括nlu模块、dm模块、nlg模块、云端动作执行引擎；所述应用层与云端通信连接，所述设备层与云端通过tsp实现通信连接。2.根据权利要求1所述智能网联汽车助手对话和形象管理系统，其特征在于：所述设备层包括麦克风，所述麦克风将语音转换为文本，并通过tsp将文本上传至云端的nlu模块；所述应用层还包括tts模块，用于朗读所述nlg模块生成的系统语言。3.根据权利要求2所述智能网联汽车助手对话和形象管理系统，其特征在于： 所述nlu模块用于对文本进行预处理及词法分析、句法分析、语义分析和情感倾向分析，并映射用户对话行为，获得对话内容的情感类型标签和问题类型标签从而初步确定形象动作标签的类型；所述dm模块用于维护和更新对话的状态，对用户所提出的问题进行分类，并基于当前的对话状态选择接下来合适的动作；所述nlg模块用于生成系统语言；所述云端动作执行引擎根据dm模块的处理结果，在nlu模块所给定的形象动作标签类型中指定相应的形象动作作为反馈结果，以实现将动作与语音问答回复相匹配。4.根据权利要求3所述智能网联汽车助手对话和形象管理系统，其特征在于：所述tts模块进行朗读系统语言与所述设备层进行智能网联汽车助手形象动作展示为同步进行。5.根据权利要求4所述智能网联汽车助手对话和形象管理系统，其特征在于：所述tts模块的输出结果为言语波形，并通过设备层的扬声器进行播放，以实现朗读nlg模块生成的系统语言。6.根据权利要求3所述智能网联汽车助手对话和形象管理系统，其特征在于：在nlu模块中，所述情感类型标签包括：积极、中性和消极；所述问题类型标签包括：车控类、应用控制类；在dm模块中对用户所提出的问题进行分类，类型包括：闲聊型、问答型和多轮对话型。7.智能网联汽车助手对话和形象管理方法，其特征在于：采用如权利要求1所述的智能网联汽车助手对话和形象管理系统，具体包括以下步骤：s1：asr-nlp-tts的车载主机终端用户认证信息管理，采用token认证，验证token成功后返回资源数据到车载主机终端；s2：asr过程，车载主机终端的麦克风将接收到的语音转换成文本，并将文本通过tsp发送给云端；s3：nlu过程，云端的nlu模块对文本进行处理，初步确定智能网联汽车助手形象动作标签的类型；s4：对话管理过程，云端的dm模块维护和更新对话的状态，包含所有可能会影响到接下
来决策的信息，并对问题进行分类，然后基于当前的对话状态，选择接下来合适的动作；s5：tts过程，tts模块收到nlg模块下发的系统语言文本后，对文本进行语言学分析，将语言学描述转化成言语波形并通过设备层的扬声器进行播放；s6：形象动作执行，云端动作执行引擎实现将动作与语音问答回复相匹配后，下发对应的动作指令给车载主机终端的动作渲染sdk，动作渲染sdk根据所收到的动作指令查找云端对应的可执行文件路径，获取云端对应的形象动作资源并在渲染引擎中执行；s7：形象动作渲染，在智能网联汽车助手app中初始化渲染引擎并最终完成动作执行。8.根据权利要求7所述智能网联汽车助手对话和形象管理方法，其特征在于：所述步骤s1中，用户通过用户名和密码发送请求，在完成服务器中的程序验证后返回一个签名的token给车载主机终端储存，所述签名的token每次用于发送请求。9.根据权利要求7所述智能网联汽车助手对话和形象管理方法，其特征在于：所述步骤s3中，nlu模块对文本进行预处理、词法分析、句法分析、语义分析和情感倾向分析，在情感倾向分析中采用支持向量机，解决小样本、非线性及高维识别。10.根据权利要求7所述智能网联汽车助手对话和形象管理方法，其特征在于：所述步骤s7中，在车载主机终端的智能网联汽车助手app中初始化渲染引擎，在需要显示的形象动作的xml布局文件里添加视图并设置好大小，初始化视图，调用渲染sdk接口加载资源展示形象动作并确定要显示的模式，调用渲染sdk接口绑定生命周期，加载资源文件，资源加载成功后执行动作，执行动作完成后调用渲染sdk接口释放资源完成视图销毁。

技术总结
本发明涉及一种智能网联汽车助手对话和形象管理系统和方法，系统包括车载主机终端和云端；所述车载主机终端包括设备层和应用层，所述应用层为车载主机内所搭载的智能网联汽车助手APP；所述设备层用于智能网联汽车助手形象动作展示；所述云端包括NLU模块、DM模块、NLG模块、云端动作执行引擎；所述应用层与云端通信连接，所述设备层与云端通过TSP实现通信连接。本发明提供了一种将NLU、DM和动作执行引擎相结合的技术，解决了智能网联汽车助手语音回复内容与形象动作联动的问题，让形象动作兼具情感性与专业性，提供给车载主机终端良好的动画反馈，满足用户对情感化、形象化3D形象车载语音助手的需求。载语音助手的需求。载语音助手的需求。


技术研发人员：石小峰 杨芳 蔡春茂
受保护的技术使用者：重庆长安汽车股份有限公司
技术研发日：2022.02.21
技术公布日：2022/5/25