音频处理方法、半入耳式耳机与流程

摘要: 本公开涉及半入耳式耳机,特别涉及一种音频处理方法、一种半入耳式耳机。背景技术:1、随着移动终端的发展,耳机类音频设备已广泛应用于办公、通勤、运动及娱乐等多种场景...
音频处理方法、半入耳式耳机与流程

本公开涉及半入耳式耳机,特别涉及一种音频处理方法、一种半入耳式耳机。

背景技术:

1、随着移动终端的发展,耳机类音频设备已广泛应用于办公、通勤、运动及娱乐等多种场景。现有耳机产品主要包括入耳式耳机、半入耳式耳机以及骨传导耳机等不同结构形式。其中,入耳式耳机由于具有较好的耳道封闭性,能够提供较好的隔音效果和声音私密性,但长时间佩戴时容易产生耳道压迫感,影响佩戴舒适性。相比之下,半入耳式耳机和骨传导耳机具有较好的透气性和佩戴舒适性,更适合长时间使用,但由于其开放式声学结构,容易受到外界噪声干扰,并存在声音泄漏较明显、听觉沉浸感不足等问题。

2、此外,用户在实际使用过程中通常需要面对安静办公、公共交通、户外运动等不同听觉环境,而现有耳机产品大多针对固定场景进行声学设计,难以根据外部环境变化兼顾佩戴舒适性、声音私密性以及稳定的听觉体验。

3、因此,如何在保证开放式佩戴舒适性的基础上,提升半入耳式耳机在不同听觉场景下的声场表现和声音私密性,成为当前音频设备领域亟待解决的技术问题。

技术实现思路

1、本公开实施例提供一种音频处理方法、一种半入耳式耳机。

2、第一方面,本公开实施例提供一种音频处理方法,应用于半入耳式耳机,所述音频处理方法包括:识别当前的听觉场景;在主动降噪的听觉场景下,将所述半入耳式耳机的扬声器播放的源音频信号输入泄漏补偿滤波器,得到初始泄漏估计信号,其中,所述泄漏补偿滤波器表征由所述扬声器至所述半入耳式耳机的外部前馈麦克风 的音频物理传播路径;将所述初始泄漏估计信号与所述外部前馈麦克风采集到的环境声信号进行比较,根据比较结果调整所述泄漏补偿滤波器的参数;当所述环境声信号与所述初始泄漏估计信号的误差达到最小时,得到声泄漏估计信号;根据所述声泄漏估计信号对所述环境声信号进行校正,得到泄漏校正参考信号;将所述泄漏校正参考信号输入主动降噪滤波器,生成反相抗噪信号,以进行主动降噪。

3、在一些实施例中,所述将所述泄漏校正参考信号输入主动降噪滤波器,生成反相抗噪信号,包括:根据所述泄露校正参考信号确定当前声泄露频段;基于所述当前声泄露频段,调整所述主动降噪滤波器的频响参数,以在所述当前声泄露频段内对所述泄露校正参考信号施加高于预设基准值的增益,生成反相抗噪信号。

4、在一些实施例中,所述识别当前的听觉场景,包括:获取环境声信号、惯性测量数据;根据所述环境声信号提取环境状态特征和瞬态事件特征,并根据所述惯性测量数据提取用户状态特征;对所述环境状态特征、所述瞬态事件特征以及所述用户状态特征进行融合,生成场景特征向量;根据所述场景特征向量确定当前听觉场景。

5、在一些实施例中,根据所述场景特征向量确定当前听觉场景,包括:将所述场景特征向量输入预训练的场景识别模型,以确定当前听觉场景;其中,所述场景识别模型包括卷积神经网络模型和支持向量机模型中的至少一种;所述环境状态特征包括谱熵和谱质心中的至少一种。

6、在一些实施例中,在所述识别当前的听觉场景之后,所述音频处理方法还包括:根据所述听觉场景生成音频处理控制参数,其中,包括:响应于所述听觉场景对应于第一场景,生成关闭主动降噪处理并采用平坦均衡器曲线的控制参数;响应于所述听觉场景对应于第二场景,生成仅对低频段执行主动降噪处理、并启用声泄漏补偿的控制参数;响应于所述听觉场景对应于第三场景,生成执行主动降噪处理、人声增强处理和环境声通透处理的控制参数,其中所述主动降噪处理仅在低频段执行,所述环境声通透处理仅在中高频段执行; 响应于检测到瞬态事件特征,生成执行瞬态噪声抑制处理的控制参数。

7、在一些实施例中,所述人声增强处理包括:对多路外置麦克风信号执行方向性波束成形处理,以获得目标方向的语音信号;将所述语音信号输入轻量化端侧神经网络执行人声分离处理,获得目标人声信号;对所述目标人声信号执行增益增强处理。

8、在一些实施例中,所述环境声通透处理包括:对所述环境声信号中的中高频信号执行零延迟通透增益处理;将经通透增益处理后的环境声信号与所述目标人声信号进行融合后输出。

9、在一些实施例中,所述瞬态噪声抑制处理包括:检测环境声信号中的瞬态事件特征,所述瞬态事件特征包括波形陡峭上升沿;响应于检测到所述波形陡峭上升沿,生成与所述瞬态事件相位相反的脉冲补偿信号;将所述脉冲补偿信号输出至扬声器,以对所述瞬态事件进行对消。

10、在一些实施例中,所述检测环境声信号中的瞬态事件特征,包括:利用波形处理网络模型在时域上对音频采样点进行预测,以对波形陡峭上升沿进行检测。

11、在一些实施例中,所述响应于检测到所述波形陡峭上升沿,生成与所述瞬态事件相位相反的脉冲补偿信号,包括:响应于检测到所述波形陡峭上升沿,在预设时长内生成一个反相脉冲,作为所述脉冲补偿信号。

12、第二方面,本公开实施例提供一种半入耳式耳机,所述半入耳式耳机包括外部前馈麦克风、内部反馈麦克风、扬声器、惯性测量单元、音频处理单元;所述音频处理单元能够实现上述任意一项所述的音频处理方法。

13、本公开实施例中,半入耳式耳机能够实时识别当前的听觉场景,并根据不同听觉场景自动切换相应的音频处理模式——安静场景下保持高保真被动听感,通勤场景下执行低频降噪,对话场景下实现智能通透与人声增强,从而在全场景下提升用户体验,实现从“单纯降噪”到“智能助听/通透”的无感切换。在主动降噪的听觉场景下,针对半入耳式耳机因非密闭耦合结构导致的声泄漏问题,本公开利用泄漏补偿滤波器基于扬声器播放的源音频信号与外部前馈麦克风采集的包含环境声及泄漏分量的混合信号进行系统辨识,实时生成声泄漏估计信号,并通过该声泄漏估计信号对外部前馈麦克风采集到的环境声信号进行动态校正,以获得泄漏校正后的环境噪声参考信号。该校正过程通过反馈麦克风采集的耳道残余声压信号对泄漏补偿滤波器参数进行实时更新,使泄漏补偿滤波器能够自适应跟随佩戴状态变化,从而提高对扬声器至外部空间声学泄漏路径的建模准确性,使主动降噪滤波器始终基于更准确的环境噪声参考信号生成反相抗噪信号。由此,本公开能够在不同听觉场景下自适应调整降噪策略,在低频泄漏场景下增强反相声波能量,同时避免全频段过度补偿带来的耳压感,在提升主动降噪实时响应能力的同时改善佩戴舒适性与整体听觉体验。

1.一种音频处理方法,其特征在于,应用于半入耳式耳机,所述音频处理方法包括:

2.根据权利要求1所述的音频处理方法,其特征在于,所述将所述泄漏校正参考信号输入主动降噪滤波器,生成反相抗噪信号,包括:

3.根据权利要求1或2所述的音频处理方法,其特征在于,所述识别当前的听觉场景,包括:

4.根据权利要求3所述的音频处理方法,其特征在于,所述根据所述场景特征向量确定当前听觉场景,包括:

5.根据权利要求3所述的音频处理方法,其特征在于,在所述识别当前的听觉场景之后,根据所述听觉场景生成音频处理控制参数,包括:

6.根据权利要求5所述的音频处理方法,其特征在于,所述人声增强处理包括:

7.根据权利要求6所述的音频处理方法,其特征在于,所述环境声通透处理包括:

8.根据权利要求5所述的音频处理方法,其特征在于,所述瞬态噪声抑制处理包括:

9.根据权利要求8所述的音频处理方法,其特征在于,所述检测环境声信号中的瞬态事件特征,包括:

10.根据权利要求9所述的音频处理方法,其特征在于,所述响应于检测到所述波形陡峭上升沿,生成与所述瞬态事件相位相反的脉冲补偿信号,包括:

11.一种半入耳式耳机,其特征在于,所述半入耳式耳机包括外部前馈麦克风、内部反馈麦克风、扬声器、惯性测量单元、音频处理单元;