音频处理方法、装置、存储介质及智能眼镜与流程

技术特征：
1.一种音频处理方法，应用于智能眼镜，所述智能眼镜包括麦克风阵列，其特征在于，包括如下步骤：基于所述麦克风阵列接收多通道音频信号，并根据所述多通道音频信号分别计算在多个预设方向上的波束形成信号以及对应的功率值；根据所述功率值确定目标观测区域，在所述目标观测区域进行声源定位，以确定目标声源方向；针对所述目标声源方向进行自适应波束形成，以得到单通道增强信号；对所述单通道增强信号进行声音事件检测，并将检测结果以及所述目标声源方向显示至所述智能眼镜上。2.如权利要求1所述的音频处理方法，其特征在于，所述根据所述多通道音频信号分别计算在多个预设方向上的波束形成信号以及对应的功率值，包括：对所述多通道音频信号进行分帧、加窗和傅里叶变换处理，以得到处理后的频域信号；在所述多个预设方向上对所述频域信号进行波束形成，生成波束形成信号；计算所述多个预设方向上分别对应的波束形成信号的频域功率值。3.如权利要求2所述的音频处理方法，其特征在于，所述根据所述功率值确定目标观测区域，包括：将所述多个预设方向上分别对应的波束形成信号的频域功率值进行对比；根据对比结果确定目标方向，并根据所述目标方向确定目标观测区域。4.如权利要求1所述的音频处理方法，其特征在于，所述在所述目标观测区域进行声源定位，以确定目标声源方向，包括：根据所述目标观测区域从所述麦克风阵列中选取至少一个目标麦克风；将所述至少一个目标麦克风组成麦克风子阵列，并基于所述麦克风子阵列进行声源定位，以确定所述目标声源方向。5.如权利要求4所述的音频处理方法，其特征在于，所述基于所述麦克风子阵列进行声源定位，以确定所述目标声源方向，包括：对所述麦克风子阵列进行无重复麦克风配对，并计算配对组合的广义互相关函数；对所述广义互相关函数进行逆傅里叶变换，得到所述配对组合的角度谱函数；遍历所有麦克风配对组合，以将所有麦克风配对组合的角度谱函数累加，得到所述麦克风子阵列的角度谱函数；提取所述麦克风子阵列的角度谱函数的至少一个局部极大值，并根据满足预设条件的局部极大值对应的方位角及俯仰角确定声源方向估计值。6.如权利要求5所述的音频处理方法，其特征在于，所述针对所述目标声源方向进行自适应波束形成，以得到单通道增强信号，包括：获取所述麦克风子阵列各通道中的噪声信号功率谱；基于所述噪声信号功率谱和所述声源方向估计值进行自适应波束形成，得到所述单通道增强信号。7.如权利要求6所述的音频处理方法，其特征在于，所述获取所述麦克风子阵列各通道当中的噪声信号功率谱，包括：获取所述麦克风子阵列中每个频点的信号频域平滑功率谱；
根据所述信号频域平滑功率谱更新所述麦克风子阵列中每个频点的功率最小值，并计算所述每个频点的语音存在概率；根据所述语音存在概率，更新所述麦克风子阵列中每个频点的噪声平滑因子；根据所述麦克风子阵列接收的信号频域功率谱和所述噪声平滑因子，得到所述麦克风子阵列中每个频点的噪声功率估计值。8.一种音频处理装置，应用于智能眼镜，所述智能眼镜包括麦克风阵列，其特征在于，包括：计算模块，用于基于所述麦克风阵列接收多通道音频信号，并根据所述多通道音频信号分别计算在多个预设方向上的波束形成信号以及对应的功率值；定位模块，用于根据所述功率值确定目标观测区域，在所述目标观测区域进行声源定位，以确定目标声源方向；增强模块，用于针对所述目标声源方向进行自适应波束形成，以得到单通道增强信号；检测模块，用于对所述单通道增强信号进行声音事件检测，并将检测结果以及所述目标声源方向显示至所述智能眼镜上。9.一种存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序适于处理器进行加载，以执行如权利要求1-7任一项所述的音频处理方法中的步骤。10.一种智能眼镜，其特征在于，所述智能眼镜包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器通过调用所述存储器中存储的所述计算机程序，执行如权利要求1-7任一项所述的音频处理方法中的步骤。

技术总结
本申请实施例公开了一种音频处理方法、装置、存储介质及智能眼镜。该方法包括：基于麦克风阵列接收多通道音频信号，并根据多通道音频信号分别计算在多个预设方向上的波束形成信号以及对应的功率值，根据功率值确定目标观测区域，在目标观测区域进行声源定位，以确定目标声源方向，针对目标声源方向进行自适应波束形成，以得到单通道增强信号，对单通道增强信号进行声音事件检测，并将检测结果以及目标声源方向显示至智能眼镜上。本申请实施例通过对目标观测区域进行声源定位及声音事件检测，并且显示在智能眼镜中，从而提升听障人士的事件提醒效率。提醒效率。提醒效率。


技术研发人员：李逸洋 张新科 崔潇潇 苏悦 鲁勇
受保护的技术使用者：北京探境科技有限公司
技术研发日：2023.01.29
技术公布日：2023/3/10