情绪状态评估方法、装置、终端及设备与流程
本申请涉及智能终端数据处理,特别是涉及一种情绪状态评估方法、装置、终端及设备。
背景技术:
1、随着智能手机、平板电脑等智能终端的普及,用户在日常工作、生活和娱乐过程中会持续产生触控、滑动、停顿和应用切换等人机交互行为。用户在不同情绪状态下,其操作节奏、触控轨迹、操作时延和操作路径等行为特征可能产生相应变化。
2、现有的情绪状态评估方式通常包括基于心理量表的主动评估方式和基于图像、语音或文本内容的自动识别方式。基于心理量表的评估方式需要用户主动回答预设问题或者周期性填写量表,不仅需要用户额外参与,而且容易中断用户正常使用智能终端的过程。当需要对用户状态进行持续评估时,还需要提高量表填写频率,容易造成用户疲劳,使得实际获取的数据存在时间间隔较大和连续性不足的问题。另一类情绪识别方式通常通过摄像头采集用户面部图像,通过麦克风采集用户语音,或者获取用户输入、通信和浏览过程中产生的文本内容,再通过图像分析、语音分析或语义分析确定用户的情绪状态。这种方式需要调用摄像头、麦克风或者获取包含具体语义的信息,对终端权限和用户隐私数据具有较强依赖,并且容易受到光照条件、环境噪声、用户是否发声和用户是否产生有效文本内容等因素影响。
3、因此,如何在不获取用户输入文本语义内容且不调用摄像头和麦克风的情况下,对智能终端产生的交互数据进行连续采集和综合处理,从而降低对用户主动参与和敏感权限的依赖,并提高情绪状态评估的连续性和实时性,是亟需解决的技术问题。
技术实现思路
1、基于此,有必要针对上述技术问题,提供一种情绪状态评估方法及系统,能够解决现有技术中在不获取用户输入文本语义内容且不调用摄像头和麦克风的情况下,对智能终端产生的交互数据进行连续采集和综合处理,从而降低对用户主动参与和敏感权限的依赖的技术问题。
2、本发明技术方案如下:
3、一种情绪状态评估方法,所述方法包括:
4、在不获取用户输入文本语义内容且不调用摄像头和麦克风的条件下,采集智能终端产生的多源行为交互数据;
5、按照滑动时间窗口对所述多源行为交互数据进行时间对齐和预处理,并根据处理后的多源行为交互数据,确定触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度;
6、根据所述触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度构建行为特征向量,并将所述行为特征向量输入部署于智能终端的预设情绪评估模型;
7、通过所述预设情绪评估模型确定对应的情绪效价和情绪唤醒度,并根据所述情绪效价和情绪唤醒度确定用户的情绪状态。
8、可选地,还提供一种情绪状态评估系统,所述系统包括:
9、交互数据采集模块,用于在不获取用户输入文本语义内容且不调用摄像头和麦克风的条件下,采集智能终端产生的多源行为交互数据;
10、交互数据处理模块,用于按照滑动时间窗口对所述多源行为交互数据进行时间对齐和预处理,并根据处理后的多源行为交互数据,确定触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度;
11、特征向量处理模块,用于根据所述触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度构建行为特征向量,并将所述行为特征向量输入部署于智能终端的预设情绪评估模型;
12、情绪状态确定模块,用于通过所述预设情绪评估模型确定对应的情绪效价和情绪唤醒度,并根据所述情绪效价和情绪唤醒度确定用户的情绪状态。
13、可选地,还提供一种计算机终端,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述情绪状态评估方法所述的步骤。
14、可选地,还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述情绪状态评估方法所述的步骤。
15、本发明实现技术效果如下:
16、上述情绪状态评估方法、装置、终端及设备,本申请通过在不获取用户输入文本语义内容且不调用摄像头和麦克风的条件下,采集智能终端产生的多源行为交互数据,使得情绪状态评估过程能够利用用户正常使用智能终端时自然产生的行为信息进行分析,无需用户额外填写心理量表,也无需获取面部图像、语音内容和输入文本,从而降低情绪状态评估对用户主动参与和敏感终端权限的依赖,并减少情绪评估过程对用户正常操作的干扰;通过按照滑动时间窗口对多源行为交互数据进行时间对齐和预处理,使不同来源和不同采样时刻产生的行为数据能够基于对应的时间区间进行统一处理;进一步确定触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度,从触控行为的无序程度、操作节律稳定程度、操作路径变化程度和应用切换操作强度等不同维度表征用户的行为状态,相比仅依据单一触控次数或者单一操作频率进行判断,能够获得更加全面的行为状态表征结果;通过根据触控轨迹交互熵、交互时延抖动特征、操作路径复杂度和应用切换物理对抗强度构建行为特征向量,实现不同类型行为特征的统一表征,并将行为特征向量输入部署于智能终端的预设情绪评估模型,使多个行为维度能够共同参与情绪状态评估,降低单一行为参数发生偶然变化对评估结果产生的影响,同时,预设情绪评估模型部署于智能终端,使行为数据能够在终端侧完成特征处理和模型推理,减少原始行为数据向外部设备传输的需求,有利于提高数据处理效率和情绪评估的实时性;通过预设情绪评估模型确定情绪效价和情绪唤醒度,并根据情绪效价和情绪唤醒度确定用户的情绪状态,使不同类型的多源行为交互特征能够被转换为统一的情绪状态表征结果。由于多源行为交互数据能够随着用户使用智能终端的过程持续产生,因此能够基于连续滑动时间窗口动态更新对应的情绪效价、情绪唤醒度和用户情绪状态,从而提高用户情绪状态评估的连续性和动态响应能力。
1.一种情绪状态评估方法,其特征在于,所述方法包括:
2.根据权利要求1所述的情绪状态评估方法,其特征在于,采集智能终端产生的多源行为交互数据,包括:
3.根据权利要求2所述的情绪状态评估方法,其特征在于,按照滑动时间窗口对所述多源行为交互数据进行时间对齐和预处理,包括:
4.根据权利要求3所述的情绪状态评估方法,其特征在于,根据所述预处理行为交互数据确定所述触控轨迹交互熵,包括:
5.根据权利要求3所述的情绪状态评估方法,其特征在于,根据所述预处理行为交互数据确定所述交互时延抖动特征,包括:
6.根据权利要求3所述的情绪状态评估方法,其特征在于,根据所述预处理行为交互数据确定所述操作路径复杂度,包括:
7.根据权利要求3所述的情绪状态评估方法,其特征在于,根据所述预处理行为交互数据确定所述应用切换物理对抗强度,包括:
8.一种情绪状态评估系统,其特征在于,所述系统包括:
9.一种计算机终端,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述方法的步骤。
版权声明:本站专利文献数据主要来源于国家知识产权局等公开渠道,由 技术新讯 进行整理汇编。页面设计及数据汇编的著作权归本站所有。全部内容仅供个人学习、科研评估与技术交流参考,严禁用于任何商业用途(包括但不限于直接生产制造、技术转让、倒卖数据等)。
免责条款:专利技术具有时效性,本站不对资料的绝对准确性、完整性和可实施性提供任何明示或暗示的担保。因参考本站内容造成的直接或间接损失,本站不承担相关法律责任。若您认为本站内容有侵权问题,请及时提供权属证明与我们联系,本站将在核实后依法处理。反馈意见:yyfuon@163.com