基于驾驶员行为识别的智能监督方法、系统及设备与流程

摘要: 本公开涉及车联网,尤其涉及一种基于驾驶员行为识别的智能监督方法、系统及设备。背景技术:1、相关技术中,dms(drivermonitoringsystem,驾驶...
基于驾驶员行为识别的智能监督方法、系统及设备与流程

本公开涉及车联网,尤其涉及一种基于驾驶员行为识别的智能监督方法、系统及设备。

背景技术:

1、相关技术中,dms(driver monitoring system,驾驶员监控系统)及辅助驾驶技术主要依赖车载传感器的单向告警(如蜂鸣器报警、屏幕提示或单纯语音提醒等)。而且,车载语音交互系统通常采用固定的播报参数进行告警,例如采用固定的音量、语速、话术风格等。这种方式虽然可以实现告警,但无法确认驾驶员是否真正收到告警,以及是否做出纠正措施;而且,采用固定播报参数会导致告警僵化,影响用户体验。

技术实现思路

1、本公开提供了一种基于驾驶员行为识别的智能监督方法、系统及设备。

2、根据本公开的第一方面,提供了一种基于驾驶员行为识别的智能监督方法,包括:

3、获取驾驶员状态数据;

4、在所述驾驶员状态数据指示所述驾驶员状态为预设异常状态的情况下,获取车内环境噪声数据,并生成第一告警级别对应的第一告警指令;

5、基于所述环境噪声数据和所述驾驶员状态数据,动态确定目标播放参数;其中,所述目标播报参数包括目标播报音量、目标播报语速、目标播报话术中的至少一种;

6、按照所述目标播报参数和所述第一告警指令进行告警;

7、在接收到驾驶员响应于告警的第一回复信息或响应超时的情况下,生成第二告警级别对应的第二告警指令;

8、按照所述第二告警指令进行告警。

9、根据本公开的第二方面,提供了一种基于驾驶员行为识别的智能监督系统,包括:

10、行为采集模块,用于获取驾驶员状态数据;

11、边缘识别模块,用于在所述驾驶员状态数据指示所述驾驶员状态为预设异常状态的情况下,获取车内环境噪声数据,并生成第一告警级别对应的第一告警指令;

12、车载智能音箱模块,用于基于所述环境噪声数据和所述驾驶员状态数据,动态确定目标播放参数;其中,所述目标播报参数包括目标播报音量、目标播报语速、目标播报话术中的至少一种;按照所述目标播报参数和所述第一告警指令进行告警;以及,按照所述第二告警指令进行告警;

13、云平台模块,用于在接收到驾驶员响应于告警的第一回复信息或响应超时的情况下,生成第二告警级别对应的第二告警指令。

14、根据本公开的第三方面,提供了一种电子设备,包括:

15、至少一个处理器;以及,

16、与所述至少一个处理器通信连接的存储器;其中,

17、所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述第一方面所述的方法。

18、根据本公开的第四方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行前述第一方面所述的方法。

19、根据本公开的第五方面,提供了一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现如前述第一方面所述的方法。

20、在本公开实施例中,获取驾驶员状态数据;在所述驾驶员状态数据指示所述驾驶员状态为预设异常状态的情况下,获取车内环境噪声数据,并生成第一告警级别对应的第一告警指令;基于所述环境噪声数据和所述驾驶员状态数据,动态确定目标播放参数;其中,所述目标播报参数包括目标播报音量、目标播报语速、目标播报话术中的至少一种;按照所述目标播报参数和所述第一告警指令进行告警;在接收到驾驶员响应于告警的第一回复信息或响应超时的情况下,生成第二告警级别对应的第二告警指令;按照所述第二告警指令进行告警。这样,通过将驾驶员状态监测、环境噪声感知、情绪识别与多级告警闭环机制相结合,可以实现告警播报参数的动态调节和告警状态的精细化分级管理。如此,一方面,动态计算目标播报音量和播报语速,结合情绪感知进行话术风格切换,可以显著提升告警信息在复杂车内环境中的可辨识度和驾驶员接受度,避免固定参数播报导致的听不清或过度打扰问题;另一方面,通过驾驶员语音回复的交互确认与超时升级机制,可以构建从边缘识别、自动播报、人机交互到人工介入的完整监督闭环,从而可以有效降低误报对驾驶员的干扰,同时可以确保异常情况的及时响应与证据存证,提升驾驶安全监控系统的智能化水平和实际应用效果。

21、应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

1.一种基于驾驶员行为识别的智能监督方法,其特征在于,包括:

2.根据权利要求1所述的基于驾驶员行为识别的智能监督方法,其特征在于,所述第一回复信息包括驾驶员的情况说明信息;所述响应超时包括超过第一预设时长未收到所述驾驶员的回复信息。

3.根据权利要求2所述的基于驾驶员行为识别的智能监督方法,其特征在于,所述在所述驾驶员状态数据指示所述驾驶员状态为预设异常状态的情况下,还包括:

4.根据权利要求3所述的基于驾驶员行为识别的智能监督方法,其特征在于,所述在接收到驾驶员响应于告警的第一回复信息或响应超时的情况下,生成第二告警指令,包括:

5.根据权利要求1所述的基于驾驶员行为识别的智能监督方法,其特征在于,保存所述通话数据和所述证据视频,包括:

6.根据权利要求1所述的基于驾驶员行为识别的智能监督方法,其特征在于,所述基于所述环境噪声数据和所述驾驶员状态数据,动态确定目标播放参数,包括如下至少一项:

7.根据权利要求1所述的基于驾驶员行为识别的智能监督方法,其特征在于,还包括:

8.根据权利要求1所述的基于驾驶员行为识别的智能监督方法,其特征在于,还包括:

9.一种基于驾驶员行为识别的智能监督系统,其特征在于,包括:

10.一种电子设备,其特征在于,包括: