无声语音识别方法、装置、介质、耳机及电子设备与流程

技术特征：

1.一种无声语音识别方法，其特征在于，所述方法包括：

获取第一信号，所述第一信号是耳机在播放前的音频信号；

获取混合信号，所述混合信号包括第二信号、以及与所述第二信号经耳道传播后的反射信号，所述第二信号是所述第一信号经所述耳机在播放后的音频信号，所述反射信号跟随无声语音对应的所述耳道的形变进行变化；

根据所述第一信号和所述混合信号确定与所述无声语音对应的识别结果。

2.根据权利要求1所述的方法，其特征在于，根据所述第一信号和所述混合信号确定与所述无声语音对应的识别结果，包括：

根据所述第一信号和所述混合信号确定参考信号，所述参考信号是与所述无声语音对应的音频信号；

根据所述参考信号确定所述识别结果。

3.根据权利要求2所述的方法，其特征在于，所述根据所述第一信号和所述混合信号确定参考信号，包括：

对所述第一信号进行延时处理，得到至少一个延时后的混合信号；

根据所述混合信号和所述至少一个延时后的混合信号确定所述参考信号。

4.根据权利要求3所述的方法，其特征在于，所述根据所述混合信号和所述至少一个延时后的混合信号确定所述参考信号，包括：

对所述混合信号和所述至少一个延时后的混合信号进行相关性运算，得到所述参考信号。

5.根据权利要求2所述的方法，其特征在于，所述根据所述第一信号和所述混合信号确定参考信号，包括：

根据所述第一信号和所述混合信号确定残差信号；

对所述残差信号进行低频过滤，得到所述参考信号，所述参考信号的频率满足预设范围。

6.根据权利要求5所述的方法，其特征在于，所述对所述残差信号进行低频过滤，得到所述参考信号，包括：

对所述残差信号进行第一低频过滤，得到过滤后的音频信号，所述过滤后的音频信号的频率满足第一预设范围；

根据所述过滤后的音频信号和所述第一信号确定降噪后的第一信号；

对所述降噪后的第一信号进行延时处理，得到至少一个延时后的混合信号；

根据所述混合信号和所述至少一个延时后的混合信号确定所述参考信号。

7.根据权利要求1至6任一所述的方法，其特征在于，所述方法还包括：

采集环境信号，所述环境信号是与所述耳道的外部声音对应的音频信号；

所述根据所述第一信号和所述混合信号确定与所述无声语音对应的识别结果，包括：

根据所述第一信号、所述混合信号和所述环境信号确定所述识别结果。

8.根据权利要求7所述的方法，其特征在于，所述根据所述第一信号、所述混合信号和所述环境信号确定所述识别结果，包括：

根据所述第一信号、所述混合信号和所述环境信号确定参考信号，所述参考信号是与所述无声语音对应的音频信号；

根据所述参考信号确定所述识别结果。

9.根据权利要求8所述的方法，其特征在于，所述根据所述第一信号、所述混合信号和所述环境信号确定参考信号，包括：

根据所述第一信号和所述环境信号确定修正后的第一信号；

根据所述修正后的第一信号获取修正后的混合信号；

对修正后的混合信号进行延时处理，得到至少一个延时后的混合信号；

根据所述修正后的混合信号和所述至少一个延时后的混合信号确定所述参考信号。

10.根据权利要求9所述的方法，其特征在于，所述根据所述修正后的混合信号和所述至少一个延时后的混合信号确定所述参考信号，包括：

对所述修正后的混合信号和所述至少一个延时后的混合信号进行相关性运算，得到所述参考信号。

11.根据权利要求8所述的方法，其特征在于，所述根据所述第一信号、所述混合信号和所述环境信号确定参考信号，包括：

根据所述第一信号和所述混合信号确定残差信号；

根据所述残差信号和所述环境信号确定修正后的残差信号；

对所述修正后的残差信号进行低频过滤，得到所述参考信号，所述参考信号的频率满足预设范围。

12.根据权利要求11所述的方法，其特征在于，所述对所述修正后的残差信号进行低频过滤，得到所述参考信号，包括：

对所述修正后的残差信号进行第一低频过滤，得到过滤后的音频信号，所述过滤后的音频信号的频率满足第一预设范围；

根据所述过滤后的音频信号和所述第一信号确定降噪后的第一信号；

对所述降噪后的第一信号进行延时处理，得到至少一个延时后的混合信号；

根据所述混合信号和所述至少一个延时后的混合信号确定所述参考信号。

13.根据权利要求1至6任一所述的方法，其特征在于，所述获取第一信号，包括：

发送周期性音频信号；

根据所述周期性音频信号确定叠加后的音频信号；

将所述叠加后的音频信号确定为所述第一信号。

14.根据权利要求1至6任一所述的方法，其特征在于，所述获取第一信号，包括：

在所述第一信号低于预设阈值的情况下，发送与所述第一信号对应的叠加信号；

根据所述第一信号和所述叠加信号确定叠加后的音频信号；

将所述叠加后的音频信号重新确定为所述第一信号。

15.一种无声语音识别装置，其特征在于，所述装置包括：

获取模块，用于获取第一信号，所述第一信号是耳机在播放前的音频信号；

所述获取模块，还用于获取混合信号，所述混合信号包括第二信号、以及与所述第二信号经耳道传播后的反射信号，所述第二信号是所述第一信号经所述耳机在播放后的音频信号，所述反射信号跟随无声语音对应的所述耳道的形变进行变化；

确定模块，用于根据所述第一信号和所述混合信号确定与所述无声语音对应的识别结果。

16.一种耳机，其特征在于，所述耳机包括扬声器、内置麦克风和处理器；

所述扬声器，用于播放第一信号；

所述内置麦克风，用于获取混合信号，所述混合信号包括第二信号、以及与所述第二信号经耳道传播后的反射信号，所述第二信号是所述第一信号经所述扬声器播放后的音频信号，所述反射信号跟随无声语音对应的所述耳道的形变进行变化；

所述处理器，用于获取所述第一信号，根据所述第一信号和所述混合信号确定与所述无声语音对应的识别结果。

17.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条程序代码，所述程序代码由所述处理器加载并执行以实现如权利要求1至14中任一项所述的无声语音识别方法。

18.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有至少一条程序代码，所述程序代码由处理器加载并执行以实现如权利要求1至14中任一项所述的无声语音识别方法。

技术总结
本申请公开了一种无声语音识别方法、装置、介质、耳机及电子设备，涉及无声语音识别领域。所述方法包括：获取第一信号，第一信号是耳机在播放前的音频信号；获取混合信号，混合信号包括第二信号、以及与第二信号经耳道传播后的反射信号，第二信号是第一信号经耳机在播放后的音频信号，反射信号跟随无声语音对应的耳道的形变进行变化；根据第一信号和混合信号确定与无声语音对应的识别结果。

技术研发人员：杜琳;李创奇
受保护的技术使用者：北京小米移动软件有限公司
技术研发日：2021.05.25
技术公布日：2021.08.27