辅助会话方法、装置、眼部可穿戴设备及程序产品与流程

本技术涉及智能设备领域，尤其涉及一种辅助会话方法、装置、眼部可穿戴设备及程序产品。

背景技术：

1、眼部可穿戴设备，通常指以眼镜或类似形态佩戴于头部，集成了显示、计算、传感与通信功能的智能设备。眼部可穿戴设备的核心目标用于实现沉浸式或增强式的人机交互体验，将数字信息与物理世界无缝融合。

2、目前的眼部可穿戴设备在进行人机交互体验时，通常采用转录等方式将语音流转换为文字进行显示，使得显示画面中的内容较多，容易引起信息过载，不利于提升用户的使用体验。

技术实现思路

1、有鉴于此，本技术实施例提供了一种辅助会话方法、装置、眼部可穿戴设备及程序产品，以解决现有技术中使用眼部可穿戴设备进行人机交互体验时，容易引起信息过载，不利于提升用户使用体验的问题。

2、本技术实施例的第一方面提供了一种辅助会话方法，所述方法包括：

3、采集会话场景中的语音数据；

4、对所述语音数据进行分析，得到辅助信息，所述辅助信息包括知识标签、人物标签、问答标签和建议标签中的至少一种；

5、在所述眼部可穿戴设备的第一预设显示区域中显示所述辅助信息。

6、本技术实施例的第二方面提供了一种辅助会话方法，所述方法包括：

7、采集会话场景中的语音数据；

8、对所述语音数据进行分析，得到辅助信息，所述辅助信息包括知识标签、人物标签、问答标签和建议标签、洞察标签和目标达成度标签中的至少一种；

9、在所述眼部可穿戴设备的第一预设显示区域中显示所述辅助信息。

10、在可能的实现方式中，所述在所述眼部可穿戴设备的第一预设显示区域中显示所述辅助信息之后，所述方法还包括：触发所述辅助信息，在所述眼部可穿戴设备显示所述辅助信息对应的关联信息；其中，所述触发所述辅助信息，在所述眼部可穿戴设备显示所述辅助信息对应的关联信息包括以下步骤中的至少一项：

11、触发所述知识标签，显示所述知识标签关联的术语对应的解释；

12、触发所述人物标签，显示所述人物标签关联的人物的介绍信息；

13、触发所述问答标签，显示所述问答标签关联问题的回答建议；

14、触发所述建议标签，显示所述建议标签关联的会话内容的会话引导信息。

15、在可能的实现方式中，对所述语音数据进行分析，得到辅助信息，包括：

16、所述辅助信息还包括洞察标签，对所述语音数据进行分析，确定会话内容对应的洞察标签，所述洞察标签用于指示所述会话内容的关注焦点信息、所述会话内容的态势感知信息、所述会话内容的风险评估信息和所述会话内容的行动指引信息中的至少一项。

17、在可能的实现方式中，在对所述语音数据进行分析，确定会话内容中包括的洞察标签之后，所述方法还包括：

18、根据所述洞察标签生成对应的行动建议信息，所述行动建议信息包括待办事项信息、准备工作信息和沟通计划中的至少一项。

19、在可能的实现方式中，在采集会话场景中的语音数据之后，所述方法还包括：

20、监测所述语音数据中包括的会话事件，在所述第一预设显示区域中生成所述会话事件对应的目标达成度标签。

21、在可能的实现方式中，所述会话事件包括响应缺失事件、信息冲突事件、关键信号事件和目标偏离事件中的至少一项；

22、监测所述语音数据中包括的会话事件，在所述第一预设显示区域中生成所述会话事件对应的目标达成度标签，包括以下至少一项：

23、监测所述语音数据中包括的会话事件为响应缺失事件时，获取对方提出的问题，并从预设资料库中检索对应的参考答案，在所述第一预设显示区域中显示所述参考答案，或者显示所述问题和所述参考答案；

24、监测到所述语音数据中包括的会话事件为信息冲突事件时，将用户的当前表述与参考信息、预设权限或预设能力边界进行比对，在所述第一预设显示区域中显示差异提示和/或修正建议；

25、监测到所述语音数据中包括的会话事件为关键信号事件时，在所述第一预设显示区域中显示所述关键信号事件对应的应对策略或推进话术；

26、监测到所述语音数据中包括的会话事件为目标偏离事件时，判断预设会话目标是否完成、会话是否即将结束、已讨论事项是否存在未闭环事项或是否存在比已有提示优先级更高的事件，在所述第一预设显示区域中显示相应的提醒信息或补充提示。

27、在可能的实现方式中，所述触发所述辅助信息，在所述眼部可穿戴设备显示所述辅助信息对应的关联信息，包括：

28、接收辅助信息的激活指令，根据所述激活指令，显示所述辅助信息对应的关联信息，并在接收关闭指令后关闭所述关联信息；

29、或者，根据所述语音数据解析更新所述辅助信息，自动触发显示更新的所述辅助信息对应的关联信息，并在持续显示第一预定时长后自动关闭所述关联信息。

30、在可能的实现方式中，所述在所述眼部可穿戴设备的第一预设显示区域中显示所述辅助信息，包括：

31、在分析得到新的辅助信息时，在所述第一预设显示区域的所述辅助信息的列表置顶位置显示新的所述辅助信息。

32、在可能的实现方式中，所述在采集会话场景中的语音数据之后，所述方法还包括：

33、对所述语音数据进行分析生成主题标签，所述主题标签为所述语音数据对应的主题确定的标签；

34、根据所述分析在第二预设显示区域实时更新显示当前所述主题标签。

35、在可能的实现方式中，所述根据所述分析在第二预设显示区域实时更新显示当前所述主题标签之后，所述方法还包括：

36、接收所述主题标签的触发指令，跳转至新的页面显示基于所述语音数据生成的摘要信息，和/或显示基于所述语音数据生成的所有所述主题标签。

37、在可能的实现方式中，所述眼部可穿戴设备的显示页面包括第三预设显示区域和第四预设显示区域，所述第三预设显示区域实时更新显示所述摘要信息，所述第四预设显示区域实时更新显示所述主题标签。

38、在可能的实现方式中，所述方法还包括：

39、在会话结束时，存储所述语音数据的原始内容，或者，生成总结数据、人物资料库、知识库和待办事项中的至少一项。

40、在可能的实现方式中，生成总结数据，包括：

41、对所述语音数据进行信息价值评估，获取价值满足预定要求的语音片段；

42、基于所获取的语音片段，生成总结数据。

43、在可能的实现方式中，所述总结数据包括以下至少一项：概览信息、亮点信息、详情信息和行动计划信息，其中，所述概览信息用于表征会话的整体主题和关键结论，所述亮点信息用于表征会话中具有预设重要程度的结论或决策，所述详情信息包括基于时间顺序组织的会话内容，所述行动计划信息用于表征会话中产生的待办事项、责任人和/或时限信息。

44、在可能的实现方式中，在采集会话场景中的语音数据之后，所述方法还包括：

45、根据所述语音数据生成转录数据，在所述第一预设显示区域中预定子区域实时显示所述转录数据。

46、本技术实施例的第三方面提供了一种眼部可穿戴设备，所述眼部可穿戴设备包括：

47、语音数据采集单元，用于采集会话场景中的语音数据；

48、解析单元，用于通过第一方面中各实现方式中的方法对所述语音数据进行分析，得到辅助信息，所述辅助信息包括知识标签、人物标签、问答标签和建议标签中的至少一种；

49、显示单元，用于在眼部可穿戴设备的第一预设显示区域中显示所述辅助信息。

50、本技术实施例的第四方面提供了一种眼部可穿戴设备，包括：

51、语音数据采集单元，用于采集会话场景中的语音数据；

52、传输单元，用于传输所述语音数据，并接收通过第一方面中各实现方式中的方法分析所述得到的辅助信息，所述辅助信息包括知识标签、人物标签、问答标签和建议标签中的至少一种，或者所述所述辅助信息包括知识标签、人物标签、问答标签和建议标签、洞察标签和目标达成度标签中的至少一种；

53、显示单元，用于在所述眼部可穿戴设备的第一预设显示区域中显示所述辅助信息。

54、本技术实施例的第五方面提供了一种辅助会话装置，包括存储器、处理器、发射器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时能够实现第一方面中各实现方式中的方法，并向所述眼部可穿戴设备传输所述辅助信息。

55、本技术实施例的第六方面，提供了一种计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面或其各实现方式中的方法。

56、本技术实施例的第七方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面任一项所述方法的步骤。

57、本技术实施例的第八方面提供了一种芯片，用于实现上述第一方面中各实现方式中的方法。具体地，上述芯片包括：处理器，用于从存储器中调用并运行计算机程序，使得安装有上述芯片的设备执行如上述第一方面或其各实现方式中的方法。

58、本技术实施例与现有技术相比存在的有益效果是：本技术实施例对于会话场景中的语音数据进行分析，得到辅助信息，在眼部可穿戴设备的第一预设显示区域中，通过标签的形式显示该辅助信息，从而可以大大的减少眼部可穿戴设备显示的数据信息，并且根据语音数据分析得到的辅助信息，包括如显示知识标签、人物标签、问答标签和建议标签中的至少一项，可有效用于辅助用户进行会话，有利于提升用户使用眼部可穿戴设备进行辅助会话的使用体验。