一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

基于耳机的危险预警方法、耳机设备及存储介质与流程

2022-06-16 01:10:26 来源:中国专利 TAG:


1.本发明涉及耳机技术领域,尤其涉及一种基于耳机的危险预警方法、耳机设备及存储介质。


背景技术:

2.目前多数耳机都有anc(active noise cancellation,主动降噪)等降噪功能,使我们能在嘈杂的环境中依然清晰聆听,但是随之带来另外一个问题,降噪性能越好,我们反而越不能感知外界的风险。许多人在公共场所佩戴着耳机,常常听不到喇叭声、叫喊声或车辆驶近的声音,如何提高用户使用耳机时的安全性是一个亟待解决的问题。


技术实现要素:

3.本发明的主要目的在于提供一种基于耳机的危险预警方法、耳机设备及存储介质,旨在提供一种帮助用户感知外界风险的耳机预警方案,提高用户使用耳机安全性。
4.为实现上述目的,本发明提供一种基于耳机的危险预警方法,所述方法应用于耳机设备,所述方法包括:
5.采集所述耳机设备周围的环境声音信息及环境状况信息,其中,所述环境状况信息包括环境图像信息和/或环境距离信息;
6.将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景;
7.若确定用户处于所述危险场景,则输出提示信息以提示用户。
8.可选地,所述环境状况信息包括环境图像信息时,所述场景参数包括第一危险物信息和危险声音的第一音频信息,所述将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景的步骤包括:
9.对所述环境图像信息进行图像识别得到第二危险物信息;
10.将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第一危险物信息与所述第二危险物信息进行比对;
11.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则确定用户处于所述危险场景。
12.可选地,所述场景参数还包括针对用户与危险源之间的限制距离,所述若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则确定用户处于所述危险场景的步骤包括:
13.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则根据所述环境声音信息中的音量信息计算危险源与用户之间的第一相隔距离;
14.若确定所述第一相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
15.可选地,所述环境状态信息包括所述环境距离信息,且所述环境距离信息为用户与障碍物之间的第二相隔距离时,所述场景参数包括针对用户与危险源之间的限制距离和危险声音的第一音频信息,所述将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景的步骤包括:
16.将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第二相隔距离与所述限制距离进行比对;
17.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
18.可选地,所述环境状态信息还包括障碍物特征信息,所述场景参数还包括危险物特征信息,所述若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景的步骤包括:
19.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则将所述障碍物特征信息与所述危险物特征信息进行比对;
20.若确定所述障碍物特征信息与所述危险物特征信息比对一致,则确定用户处于所述危险场景。
21.可选地,所述若确定用户处于所述危险场景,则输出提示信息以提示用户的步骤之后,还包括:
22.检测是否接收到用户针对所述提示信息触发的危险确认指令;
23.若接收到所述危险确认指令,则停止输出所述提示信息。
24.可选地,所述采集所述耳机设备周围的环境声音信息及环境状况信息的步骤之前,还包括:
25.检测所述耳机设备的降噪模式是否开启;
26.若所述耳机设备的降噪模式开启,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的步骤。
27.可选地,所述采集所述耳机设备周围的环境声音信息及环境状况信息的步骤之前,还包括;
28.检测所述耳机设备的音频输出音量是否大于预设音量阈值;
29.若所述音频输出音量大于所述预设音量阈值,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的步骤。
30.为实现上述目的,本发明还提供一种基于耳机的危险预警装置,所述装置部署于耳机设备,所述装置包括:
31.采集模块,用于采集所述耳机设备周围的环境声音信息及环境状况信息,其中,所述环境状况信息包括环境图像信息和/或环境距离信息;
32.比对模块,用于将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景;
33.输出模块,用于若确定用户处于所述危险场景,则输出提示信息以提示用户。
34.为实现上述目的,本发明还提供一种耳机设备,所述耳机设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于耳机的危险预警程序,所述基于耳机的危险预警程序被所述处理器执行时实现如上所述的基于耳机的危险预警方法的步
骤。
35.此外,为实现上述目的,本发明还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有基于耳机的危险预警程序,所述基于耳机的危险预警程序被处理器执行时实现如上所述的基于耳机的危险预警方法的步骤。
36.本发明中,通过采集耳机设备周围的环境声音信息及环境状况信息,其中,环境状况信息包括环境图像信息和/或环境距离信息,将环境声音信息和环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于该危险场景,若确定用户处于危险场景,则输出提示信息以提示用户,实现了一种帮助用户感知外界风险的耳机预警方案,避免用户因佩戴耳机听不清外界危险声音而无法及时躲避危险带来的危害,提高了用户使用耳机的安全性。
附图说明
37.图1为本发明基于耳机的危险预警方法第一实施例的流程示意图;
38.图2为本发明基于耳机的危险预警装置较佳实施例的功能模块示意图。
39.本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
40.应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
41.参照图1,图1为本发明基于耳机的危险预警方法第一实施例的流程示意图。
42.本发明实施例提供了基于耳机的危险预警方法的实施例,需要说明的是,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。本发明实施例基于耳机的危险预警方法应用于耳机设备,当所述耳机设备包括两只耳机时,所述事件提醒方法可用于其中任意一只耳机。本实施例中,所述基于耳机的危险预警方法包括:
43.步骤s10,采集所述耳机设备周围的环境声音信息及环境状况信息,其中,所述环境状况信息包括环境图像信息和/或环境距离信息;
44.在本实施例中,耳机设备可以采集耳机设备周围的环境声音信息和环境状况信息,通过环境声音信息和环境状况信息来判断用户是否处于危险场景。
45.具体地,在一实施方式中,耳机设备中可以通过设置声音采集装置来采集环境声音信息,通过设置摄像头来采集环境图像信息,通过超声波测距装置来采集环境距离信息。或者,在其他实施方式中,也可以通过在其他设备例如用户终端中设置声音采集装置、摄像头、超声波测距装置来采集相应的信息,并将信息发送给耳机设备。以下以在耳机设备中设置相应装置为例进行具体实施方式的阐述。
46.耳机设备中可以设置至少一个声音采集装置,用于采集耳机设备周围环境中的环境声音信息。声音采集装置可以是麦克风或声音传感器等能够采集声音信息的装置,具体在本实施例中不做限制。环境声音信息可以包括环境声音的音频信息和/或音量信息,具体可根据识别危险场景所需的信息种类而设置。耳机设备中可以设置采集环境声音信息的频率和时间跨度,例如,可以设置为每分钟采集一次,时间跨度为半分钟,那么一次采集获得的环境声音信息包括耳机设备周围环境半分钟所产生的声音信息。在一些实施方式中,耳
机设备可以根据耳机设备中设置的省电模式来设置频率和时间跨度,省电模式所对应的省电强度越大,频率设置得越慢,时间跨度设置得越短。在另一些实施方式中,耳机设备也可以根据耳机设备中设置的危险预警精准度来设置频率和时间跨度,危险预警精准度越高,频率设置得越快,时间跨度设置得越长。
47.耳机设备可以通过耳机设备中设置的环境传感器采集耳机设备周围的环境状况信息。环境传感器可以包括摄像头或超声波测距装置,或包括摄像头和超声波测距装置。其中,当环境传感器包括摄像头时,通过摄像头采集的环境状况信息可以包括图像或视频信息(可统称为环境图像信息),当环境传感器包括超声波测距装置时,通过超声波测距装置采集的环境状况信息可以包括耳机设备(代表用户)与障碍物之间的距离(可称为环境距离信息),或者可以包括障碍物的大小、形状或类型等障碍物特征。
48.其中,超声波测距装置的识别距离约10米左右,一般超声波使用40khz及以上频段,超声波测距装置由超声波发射器装置、超声波接收装置、计数器装置、障碍物判定控制程序组成。其原理是:超声波发射装置向某一方向发射超声波,同时开始计时,超声波在空气中传播,途中碰到障碍物就立即返回,超声波接收装置收到反射波就立即停止计时。超声波在空气中的传播速度为340m/s,根据计时器记录的时间t,就可以计算出发射点距障碍物的距离s,即:s=340t/2。这就是所谓的时间差测距法。其中,超声波测距装置可以监测一个方向或者多个方向的障碍物情况。进一步地,当超声波测距装置监测多个方向的障碍物情况时,可以根据多个方向测量得到的与障碍物的相隔距离,计算出障碍物的大小、形状等障碍物特征,进一步地,还可以将特定的形状识别为某一类型的障碍物。
49.进一步地,为避免耳机设备在用户不需要或能够听清外界环境声音时仍然进行危险预警提示而打扰用户,影响用户使用耳机的体验,在一些实施方式中,耳机设备可以根据用户触发或自定义场景触发的指令开启耳机设备中的危险预警功能;在开启危险预警功能时,耳机设备进行环境声音信息和环境状况信息的采集,进而进行危险预警;关闭危险预警功能时,不进行环境声音信息和环境状况信息的采集,不进行危险预警。
50.进一步地,在一实施方式中,所述步骤s10之前,还包括:
51.步骤a,检测所述耳机设备的降噪模式是否开启;
52.耳机设备可以在开机状态下,检测降噪模式是否开启。其中,降噪模式是耳机主动降低用户听到的外界环境噪声的模式,可采用常规的耳机降噪方法实现,在此不做限制。其中,检测降噪模式是否开启可以是按照一定频率主动监测降噪模式开启事件,也可以是被动接收到上报的降噪模式开启事件时确定耳机设备已开启降噪模式。
53.步骤b,若所述耳机设备的降噪模式开启,则执行所述步骤s10;
54.若耳机设备确定降噪模式开启,则可以执行通过声音采集装置采集环境声音信息的操作,以及执行通过环境传感器采集环境状况信息的操作。也即,在耳机设备确定降噪模式开启时,可以开启耳机设备中的危险预警功能。通过在耳机设备开启降噪模式时自动开启危险预警功能,在检测到处于危险场景时自动提示,可以避免用户因佩戴耳机时开启降噪模式无法或难以听清外界环境的危险声音而导致危险躲避不及。若耳机设备确定降噪模式未开启,则说明用户佩戴耳机时可以听到一些外界的声音。在一实施方式中,对于通透性强的耳机设备,可以设置为耳机设备在降噪模式未开启时,不开启危险预警功能,也即,不进行环境声音信息和环境状况信息的采集。
55.进一步地,在另一实施方式中,所述所述步骤s10之前,还包括:
56.步骤c,检测所述耳机设备的音频输出音量是否大于预设音量阈值;
57.对于一些通透性弱的耳机设备,可以设置为耳机设备在开机状态下,检测耳机设备的音频输出音量是否大于预设音量阈值,或者在检测到耳机设备的降噪模式未开启的情况下,进一步检测耳机设备的音频输出音量是否大于预设音量阈值。其中,预设音量阈值可以通过测试根据测试结果选取,也即,测试在用户佩戴耳机时,音频输出音量达到多大时用户将无法听清外界环境声音。
58.步骤d,若所述音频输出音量大于所述预设音量阈值,则执行所述步骤s10。
59.若耳机设备检测到音频输出音量大于预设音量阈值,则可以执行通过声音采集装置采集环境声音信息的操作,以及执行通过环境传感器采集环境状态信息的操作。也即,在耳机设备确定音频输出音量大于预设音量阈值时,可以开启耳机设备中的危险预警功能。通过在耳机设备音频输出音量大于预设音量阈值时自动开启危险预警功能,在检测到处于危险场景时自动提示,可以避免用户因佩戴耳机时耳机播放音频音量过大而无法或难以听清外界环境的危险声音,导致危险躲避不及。
60.进一步地,在一实施方式中,若耳机设备检测到音频输出音量不大于预设音量阈值,则不开启危险预警功能,也即,不进行环境声音信息和环境状况信息的采集。
61.步骤s20,将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景;
62.耳机设备在获取到环境声音信息和环境状况信息后,可以将环境声音信息和环境状况信息与危险场景的场景参数进行比对,以根据比对结果确定用户是否处于该危险场景。其中,危险场景的场景参数可以根据需要预先进行设置,可以包括针对环境声音信息而设置的参数和针对环境状况信息而设置的参数;在比对时,将环境声音信息与对应的参数进行比对,将环境状况信息与对应的参数进行比对,得到两种信息是否与对应的参数比对一致的结果;根据具体场景,可以设置为当两个比对结果均是比对一致时,确定处于该危险场景,或者,当其中至少一个比对结果为比对一致时,确定处于该危险场景。在具体实施方式中,针对环境声音信息设置的参数和针对环境状况信息设置的参数可以根据识别危险场景所需的参数种类而设置。例如,针对环境声音信息设置的参数可以是一个音量范围,当根据环境声音信息中的音量信息计算得到的音量均值处于该音量范围内时,即可确定环境声音信息与对应的参数比对一致。又如,针对环境状况信息中图像信息设置的参数可以是危险物信息,当将图像信息进行识别得到图像中的危险物信息,该危险物信息与设置的危险物信息比对一致时,即可确定环境状况信息与对应的参数比对一致。
63.在一实施方式中,耳机设备中设置的危险场景可以有多个,表示多种不同的危险场景,例如,可以定义一种用户过马路时周边车辆声音较大的危险场景,又如,可以定义一种用户外出时周围发生“着火”呼声的危险场景。不同的危险场景分别设置不同的场景参数,耳机设备将环境声音信息和环境状况信息与各种危险场景的场景参数分别进行比对,以确定用户是否处于任一一个危险场景。
64.步骤s30,若确定用户处于所述危险场景,则输出提示信息以提示用户。
65.若耳机设备确定用户处于危险场景,则可以输出提示信息提示用户。其中,提示信息可以预先在耳机设备中设置,可以是提示铃声,也可以是提示语音,具体不做限制。在一
实施方式中,当耳机设备中设置多个危险场景时,可以设置不同的提示信息以助于用户区分各种危险场景,例如,对于用户外出时周围发生“着火”呼声的危险场景,可以输出提示语音“请注意您的附近是否发生火灾,请及时躲避”。
66.进一步地,在一实施方式中,若确定用户不处于危险场景(当有多个危险场景时,确定不处于任意一个危险场景),则可以不进行危险提示,也即,不输出提示信息,继续进行信息采集。
67.进一步地,在一实施方式中,耳机设备中也可以设置安全场景对应的场景参数,将环境声音信息和环境状况信息与安全场景对应的场景参数进行比对,确定用户是否处于安全场景,若确定用户处于安全场景,则可以不进行危险提示。
68.进一步地,在一实施方式中,所述步骤s30之后,还包括:
69.步骤s40,检测是否接收到用户针对所述提示信息触发的危险确认指令;
70.耳机设备在输出提示信息后,可以检测是否接收到用户针对提示信息触发的危险确认指令。其中,危险确认指令可以由用户通过耳机设备中的物理按键或触控按键触发,或者可以通过语音指令触发,在此并不做限制。危险确认指令用于表示用户已知道自己处于危险场景。
71.步骤s50,若接收到所述危险确认指令,则停止输出所述提示信息。
72.若耳机设备接收到危险确认指令,则可以停止输出提示信息,以避免打扰用户。
73.在本实施例中,通过采集耳机设备周围的环境声音信息及环境状况信息,其中,环境状况信息包括环境图像信息和/或环境距离信息,将环境声音信息和环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于该危险场景,若确定用户处于危险场景,则输出提示信息以提示用户,实现了一种帮助用户感知外界风险的耳机预警方案,避免用户因佩戴耳机听不清外界危险声音而无法及时躲避危险带来的危害,提高了用户使用耳机的安全性。
74.进一步地,基于上述第一实施例,提出本发明基于耳机的危险预警方法的第二实施例,在本实施例中,所述步骤s20包括:
75.步骤s201,对所述环境图像信息进行图像识别得到第二危险物信息;
76.在本实施例中,环境状况信息可以包括环境图像信息,场景参数中针对环境图像信息设置的参数可以包括危险场景中危险物的信息(以下称为第一危险物信息),例如,第一危险物信息可以包括危险场景中存在的静态危险标识和动态移动物体的名称或者是图像特征信息。
77.耳机设备可以对环境图像信息进行图像识别,得到图像中所包含的危险物的信息(以下称为第二危险物信息),例如,第二危险物信息可以包括图像中存在的静态危险标识和动态移动物体的名称或者是图像特征信息。其中,在一实施方式中,耳机设备可以采用图像匹配的方式来识别图像中静态危险物标识和动态移动物体的名称,也即,将环境图像信息与预先设置好的各种包含静态危险物标识和动态移动物体的图像进行匹配,确定环境图像信息中是否包含其中一些危险物标识或动态移动物体,若包含,则将危险物标识或动态移动物体的名称作为识别得到的第二危险物信息。在一实施方式中,耳机设备在确定环境图像信息中包含一些危险物标识或动态移动物体后,可以将这些危险物标识或动态移动物体在环境图像信息中的图像特征信息提取出来作为第二危险物信息。
78.步骤s202,将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第一危险物信息与所述第二危险物信息进行比对;
79.环境声音信息可以包括环境声音的音频信息(以下称为第二音频信息以示区分),场景参数中针对第二音频信息设置的参数可以包括危险场景中危险声音的音频信息(以下称为第一音频信息以示区分)。
80.耳机设备可以将第二音频信息与第一音频信息进行比对,比对的方式根据危险场景的类型不同可以设置不同的比对方式;例如,当危险场景是用户外出时周围发生“着火”呼声的场景时,需要比对环境声音是否包含“着火”二字,第一音频信息可以是提前录入的包含人声呼喊“着火”的音频信息,比对方式可以是将第二音频信息与第一音频信息分别进行语音识别,将语音识别结果进行比对,若相似度达到一定阈值,则可确定第二音频信息与第一音频信息比对一致;又如,当危险场景是用户过马路时周边车辆声音较大的场景时,需要比对环境声音是否有车辆声音,第一音频信息可以是提前录入的包含车辆行驶声音的音频信息,比对方式可以是直接将第二音频信息与第一音频信息进行音频相似度比对,若相似度达到一定阈值,则可确定第二音频信息与第一音频信息比对一致。
81.耳机设备可以将第一危险物信息与第二危险物信息进行比对,比对的方式根据危险场景的类型不同可以设置不同的比对方式;例如,当危险场景是用户外出时周围发生“着火”呼声的场景时,需要比对用户周围是否有“火”这一危险物,第一危险物信息可以是提前设置好的“火”这一危险物的名称或图像特征信息,比对方式可以是判断第二危险物信息中是否出现第一危险物信息中包含的“火”这一危险物名称,或判断第二危险物信息中的图像特征信息是否与第一危险物信息中“火”这一危险物的图像特征信息相似度超过一定阈值,若是,则可以确定第一危险物信息与第二危险物信息匹配一致;又如,当危险场景是用户过马路时周边车辆声音较大的场景时,需要比对用户周围是否有“汽车”这一危险物,第一危险物信息可以是提前设置好的“汽车”这一危险物的名称或图像特征信息,比对方式可以是判断第二危险物信息中是否出现第一危险物信息中包含的“汽车”这一危险物名称,或判断第二危险物信息中的图像特征信息是否与第一危险物信息中“汽车”这一危险物的图像特征信息相似度超过一定阈值,若是,则可以确定第一危险物信息与第二危险物信息匹配一致。
82.步骤s203,若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则确定用户处于所述危险场景。
83.在一实施方式中,可以根据危险场景的类型,设置当确定第二音频信息与第一音频信息比对一致,且第一危险物信息与第二危险物信息比对一致时,确定用户处于危险场景。
84.在另一实施方式中,也可以根据危险场景的类型,设置当第二音频信息与第一音频信息,以及第一危险物信息与第二危险物信息,两者中至少一个比对一致,即可确定用户处于危险场景。
85.在本实施例中,通过将环境声音信息中的第二音频信息与场景参数中的第一音频信息进行比对,将环境状况信息中的第二危险物信息与场景参数中的第一危险物信息进行比对,根据比对结果确定用户是否处于危险场景,从音频和图像两个维度限定和识别危险场景,提高了危险场景的识别准确度,进而提高了耳机进行危险预警的准确度,提高了用户
使用耳机的安全性。
86.进一步地,在一实施方式中,所述步骤s203包括:
87.步骤s2031,若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则根据所述环境声音信息中的音量信息计算危险源与用户之间的第一相隔距离;
88.步骤s2032,若确定所述第一相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
89.在一实施方式中,环境声音信息还可以包括环境声音的音量信息,以便于根据音量信息计算危险源与用户之间的相隔距离(以下称为第一相隔距离),场景参数还可以包括针对危险源与用户的限制距离,可以根据危险场景的类型,设置当第二音频信息与第一音频信息比对一致,且第一危险物信息与第二危险物信息比对一致时,进一步还要将危险源与用户之间的第一相隔距离,与限制距离进行比对。比对的方式可以设置为当第一相隔距离小于限制距离时确定第一相隔距离与限制距离比对一致。若耳机设备确定第一相隔距离与限制距离比对一致,则确定用户处于危险场景中。其中,根据音量信息计算危险源与用户之间的第一相隔距离具体可以是,预先在实验室测试得到不同距离的声源发出的声音被耳机设备的声音采集装置采集时所能达到的音量大小,计算得到距离与音量大小之间的对应关系,耳机设备根据对应关系,将音量信息中的音量值(若耳机设备获得的是持续一段时间的环境声音信息,则音量信息中可能包括多个时间点分别对应的音量值)按照对应关系转换为距离得到第一相隔距离(若转换得到多个距离值则可以取平均值或取最大值作为第一相隔距离)。
90.进一步地,在一实施方式中,若耳机设备确定第一相隔距离与限制距离比对不一致,则可以确定用户不处于危险场景。或者,在其他实施方式中,若耳机设备确定第一相隔距离与限制距离比对不一致,则还可以进一步地进行其它信息项的比对,以在其它信息项比对一致时才认为用户处于危险场景。
91.在本实施例中,通过在将环境声音信息中的第二音频信息与场景参数中的第一音频信息进行比对,将环境状况信息中的第一危险物信息与场景参数中的第二危险物信息进行比对的基础上,进一步地将危险源与用户之间的第一相隔距离与场景参数中针对危险源与用户的限制距离进行比对,根据比对结果确定用户是否处于危险场景,从音频、图像和距离三个维度限定和识别危险场景,进一步地提高了危险场景的识别准确度,进而提高了耳机进行危险预警的准确度,提高了用户使用耳机的安全性。
92.进一步地,基于上述第一和/或第二实施例,提出本发明基于耳机的危险预警方法的第三实施例,在本实施例中,所述步骤s20包括:
93.步骤s204,将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第二相隔距离与所述限制距离进行比对;
94.在本实施例中,环境状态信息可以包括环境距离信息,且环境距离信息为用户与障碍物之间的第二相隔距离,场景参数中针对第二相隔距离设置的参数可以包括针对用户与危险源之间的限制距离。
95.环境声音信息可以包括环境声音的音频信息,也即第二音频信息,场景参数中针对第二音频信息设置的参数可以包括危险场景中危险声音的音频信息,也即,第一音频信
息。
96.耳机设备可以将第二音频信息与第一音频信息进行比对,比对的方式根据危险场景的类型不同可以设置不同的比对方式;例如,当危险场景是用户外出时周围发生“着火”呼声的场景时,需要比对环境声音是否包含“着火”二字,第一音频信息可以是提前录入的包含人声呼喊“着火”的音频信息,比对方式可以是将第二音频信息与第一音频信息分别进行语音识别,将语音识别结果进行比对,若相似度达到一定阈值,则可确定第二音频信息与第一音频信息比对一致;又如,当危险场景是用户过马路时周边车辆声音较大的场景时,需要比对环境声音是否有车辆声音,第一音频信息可以是提前录入的包含车辆行驶声音的音频信息,比对方式可以是直接将第二音频信息与第一音频信息进行音频相似度比对,若相似度达到一定阈值,则可确定第二音频信息与第一音频信息比对一致。
97.耳机设备可以将第二相隔距离与限制距离进行比对。比对的方式可以设置为当第二相隔距离小于限制距离时确定第二相隔距离与限制距离比对一致。
98.步骤s205,若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
99.在一实施方式中,可以根据危险场景的类型,设置当确定第二音频信息与第一音频信息比对一致,且第二相隔距离与限制距离比对一致时,确定用户处于危险场景。
100.在另一实施方式中,也可以根据危险场景的类型,设置当第二音频信息与第一音频信息,以及第二相隔距离与限制距离,两者中至少一个比对一致,即可确定用户处于危险场景。
101.在本实施例中,通过在将环境声音信息中的第二音频信息与场景参数中的第一音频信息进行比对,将环境状况信息中障碍物与用户之间的第二相隔距离与场景参数中针对危险源与用户的限制距离进行比对,根据比对结果确定用户是否处于危险场景,从音频和距离两个维度限定和识别危险场景,进一步地提高了危险场景的识别准确度,进而提高了耳机进行危险预警的准确度,提高了用户使用耳机的安全性。
102.进一步地,在一实施方式中,所述步骤s205包括:
103.步骤s2051,若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则将所述障碍物特征信息与所述危险物特征信息进行比对;
104.在一实施方式中,环境状态信息还可以包括障碍物特征信息,场景参数中针对障碍物特征信息设置的参数可以包括危险物特征信息,可以根据危险场景的类型,设置当第二音频信息与第一音频信息比对一致,且第一危险物信息与第二危险物信息比对一致时,进一步还要将障碍物特征信息与危险物特征信息进行比对。其中,障碍物特征信息可以包括障碍物的大小、形状或类型等特征信息,对应的,危险物特征信息可以包括危险物的大小、形状或类型等特征信息。比对的方式可以设置为当障碍物特征信息中的各项特征信息与危险物特征信息中的各项特征信息均比对一致时,则确定障碍物特征信息与危险物特征信息比对一致。若耳机设备确定障碍物特征信息与危险物特征信息比对一致,则确定用户处于危险场景中。
105.进一步地,在一实施方式中,若耳机设备确定障碍物特征信息与危险物特征信息比对不一致,则可以确定用户不处于危险场景。或者,在其他实施方式中,若耳机设备确定
障碍物特征信息与危险物特征信息比对不一致,则还可以进一步地进行其它信息项的比对,以在其它信息项比对一致时才认为用户处于危险场景。
106.在本实施例中,通过在将环境声音信息中的第二音频信息与场景参数中的第一音频信息进行比对,将第二相隔距离与限制距离进行比对的基础上,进一步地将环境状况信息中的障碍物特征信息与场景参数中的危险物特征信息,根据比对结果确定用户是否处于危险场景,从音频、危险物特征和距离三个维度限定和识别危险场景,进一步地提高了危险场景的识别准确度,进而提高了耳机进行危险预警的准确度,提高了用户使用耳机的安全性。
107.此外,本发明实施例还提出一种基于耳机的危险预警装置,所述装置部署于耳机设备,参照图2,所述装置包括:
108.采集模块10,用于采集所述耳机设备周围的环境声音信息及环境状况信息,其中,所述环境状况信息包括环境图像信息和/或环境距离信息;
109.比对模块20,用于将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景;
110.输出模块30,用于若确定用户处于所述危险场景,则输出提示信息以提示用户。
111.进一步地,所述环境状况信息包括环境图像信息时,所述场景参数包括第一危险物信息和危险声音的第一音频信息,所述比对模块20包括:
112.识别单元,用于对所述环境图像信息进行图像识别得到第二危险物信息;
113.第一比对单元,用于将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第一危险物信息与所述第二危险物信息进行比对;
114.第一确定单元,用于若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则确定用户处于所述危险场景。
115.进一步地,所述场景参数还包括针对用户与危险源之间的限制距离,所述第一确定单元包括:
116.第一比对子单元,用于若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则根据所述环境声音信息中的音量信息计算危险源与用户之间的第一相隔距离;
117.第一确定子单元,用于若确定所述第一相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
118.进一步地,所述环境状态信息包括所述环境距离信息,且所述环境距离信息为用户与障碍物之间的第二相隔距离时,所述场景参数包括针对用户与危险源之间的限制距离和危险声音的第一音频信息,所述比对模块20包括:
119.第二比对单元,用于将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第二相隔距离与所述限制距离进行比对;
120.第二确定单元,用于若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
121.进一步地,所述环境状态信息还包括障碍物特征信息,所述场景参数还包括危险物特征信息,所述第二确定单元包括:
122.第二比对子单元,用于若确定所述第二音频信息与所述第一音频信息比对一致,
且所述第二相隔距离与所述限制距离比对一致,则将所述障碍物特征信息与所述危险物特征信息进行比对;
123.第二确定子单元,用于若确定所述障碍物特征信息与所述危险物特征信息比对一致,则确定用户处于所述危险场景。
124.进一步地,所述装置还包括:
125.第一检测模块,用于检测是否接收到用户针对所述提示信息触发的危险确认指令;
126.所述输出模块30还用于若接收到所述危险确认指令,则停止输出所述提示信息。
127.进一步地,所述装置还包括:
128.第二检测模块,用于检测所述耳机设备的降噪模式是否开启;
129.第三采集模块,用于若所述耳机设备的降噪模式开启,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作。
130.进一步地,所述装置还包括;
131.第三检测模块,用于检测所述耳机设备的音频输出音量是否大于预设音量阈值;
132.第四采集模块,用于若所述音频输出音量大于所述预设音量阈值,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作。
133.本发明基于耳机的危险预警装置的具体实施方式的拓展内容与上述基于耳机的危险预警方法各实施例基本相同,在此不做赘述。
134.本发明耳机设备包括结构壳体、通信模块、主控模块(例如微控制单元mcu)、扬声器、麦克风、存储器等组成。主控模块可包含微处理器、音频解码单元、电源及电源管理单元、系统所需的传感器和其他有源或无源器件等(可以根据实际功能进行更换、删减或增加),实现无线音频的接收与播放功能。耳机设备可以通过通信模块与用户终端建立通信连接。耳机的存储器中可以存储有基于耳机的危险预警程序,微处理器可以用于调用存储器中存储的基于耳机的危险预警程序,并执行以下操作:
135.采集所述耳机设备周围的环境声音信息及环境状况信息,其中,所述环境状况信息包括环境图像信息和/或环境距离信息;
136.将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景;
137.若确定用户处于所述危险场景,则输出提示信息以提示用户。
138.进一步地,所述环境状况信息包括环境图像信息时,所述场景参数包括第一危险物信息和危险声音的第一音频信息,所述将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景的操作包括:
139.对所述环境图像信息进行图像识别得到第二危险物信息;
140.将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第一危险物信息与所述第二危险物信息进行比对;
141.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则确定用户处于所述危险场景。
142.进一步地,所述场景参数还包括针对用户与危险源之间的限制距离,所述若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险
物信息比对一致,则确定用户处于所述危险场景的操作包括:
143.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第一危险物信息与所述第二危险物信息比对一致,则根据所述环境声音信息中的音量信息计算危险源与用户之间的第一相隔距离;
144.若确定所述第一相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
145.进一步地,所述环境状态信息包括所述环境距离信息,且所述环境距离信息为用户与障碍物之间的第二相隔距离时,所述场景参数包括针对用户与危险源之间的限制距离和危险声音的第一音频信息,所述将所述环境声音信息和所述环境状况信息与预设的危险场景的场景参数进行比对,确定用户是否处于所述危险场景的操作包括:
146.将所述环境声音信息中的第二音频信息与所述第一音频信息进行比对,以及将所述第二相隔距离与所述限制距离进行比对;
147.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景。
148.进一步地,所述环境状态信息还包括障碍物特征信息,所述场景参数还包括危险物特征信息,所述若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则确定用户处于所述危险场景的操作包括:
149.若确定所述第二音频信息与所述第一音频信息比对一致,且所述第二相隔距离与所述限制距离比对一致,则将所述障碍物特征信息与所述危险物特征信息进行比对;
150.若确定所述障碍物特征信息与所述危险物特征信息比对一致,则确定用户处于所述危险场景。
151.进一步地,所述若确定用户处于所述危险场景,则输出提示信息以提示用户的操作之后,微处理器还可以用于调用存储器中存储的基于耳机的危险预警程序,执行以下操作:
152.检测是否接收到用户针对所述提示信息触发的危险确认指令;
153.若接收到所述危险确认指令,则停止输出所述提示信息。
154.进一步地,所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作之前,微处理器还可以用于调用存储器中存储的基于耳机的危险预警程序,执行以下操作:
155.检测所述耳机设备的降噪模式是否开启;
156.若所述耳机设备的降噪模式开启,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作;
157.进一步地,所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作之前,微处理器还可以用于调用存储器中存储的基于耳机的危险预警程序,执行以下操作:
158.检测所述耳机设备的音频输出音量是否大于预设音量阈值;
159.若所述音频输出音量大于所述预设音量阈值,则执行所述采集所述耳机设备周围的环境声音信息及环境状况信息的操作。
160.本发明耳机设备和计算机可读存储介质的各实施例,均可参照本发明基于耳机的危险预警方法各个实施例,此处不再赘述。
161.需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排
他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个
……”
限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
162.上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
163.通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如rom/ram、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
164.以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文献