回声处理方法、装置、设备和存储介质与流程

技术特征：
1.一种回声处理方法，其特征在于，包括：根据获取的远端信号和初始的近端信号之间的延时信息，对齐所述远端信号和所述初始的近端信号，得到对齐后的信号；将所述对齐后的信号输入频域分块自适应滤波器，对所述初始的近端信号进行线性回声消除，得到消除线性回声后的近端信号；将所述消除线性回声后的近端信号和所述远端信号输入预先训练的残余回声处理模型，对所述消除线性回声后的近端信号进行残余回声消除，得到消除残余回声的近端信号；其中，残余回声处理模型基于消除线性回声的样本近端信号和样本远端信号进行训练的。2.根据权利要求1所述的回声处理方法，其特征在于，对所述初始的近端信号进行线性回声消除，得到消除线性回声后的近端信号，包括：基于线性回声消除算法，对所述初始的近端信号进行线性回声消除，得到消除线性回声后的近端信号；所述线性回声消除算法对应的计算式为：其中，e(k)为消除线性回声后的近端信号，d(k)为初始的近端信号，x
m
(k)为第m个远端信号，m为滤波器组数量，为对应块的频域分块自适应滤波器的权向量，μ为频域上的步长因子向量，为λ对应远端信号的功率谱密度矩阵，k为频带标识，n为频带数，为第i个频带对应的远端信号的功率谱密度矩阵。3.根据权利要求2所述的回声处理方法，其特征在于，第i个频带对应的远端信号的功率谱密度通过递归公式得到；所述递归公式为：φ
xx,i
(k)＝λφ
xx,i
(k
‑
1) (1
‑
λ)|x
0,i
(k)|2其中，λ为迭代因子，0＜λ＜1，i为频点数。4.根据权利要求1所述的回声处理方法，其特征在于，将所述消除线性回声后的近端信号和所述远端信号输入预先训练的残余回声处理模型，对所述消除线性回声后的近端信号进行残余回声消除，得到消除残余回声的近端信号，包括：将所述消除线性回声后的近端信号和所述远端信号进行离散余弦变换，得到与所述消除线性回声后的近端信号对应的近端离散余弦变换谱和与所述远端信号对应的远端离散余弦变换谱；将所述近端离散余弦变换谱和所述远端离散余弦变换谱拼接成双通道张量；将所述双通道张量输入所述残余回声处理模型的编码层，得到与所述双通道张量对应的初始的抽象特征；
将所述初始的抽象特征输入所述残余回声处理模型的长短时记忆层进行特征筛选，得到筛选后的抽象特征；将与所述筛选后的抽象特征输入所述残余回声处理模型的解码层，得到所述抽象特征的时频掩码；将所述时频掩码与所述消除线性回声后的近端信号相乘，得到所述消除残余回声的近端信号。5.根据权利要求4所述的回声处理方法，其特征在于，所述编码层和所述解码层的数目均为多个，所述编码层和所述解码层的数目相同，且一一对应；每个编码层与对应的解码层之间采用跳跃机制连接。6.根据权利要求1所述的回声处理方法，其特征在于，所述残余回声处理模型的训练过程包括：根据获取的样本远端信号和样本近端信号之间的延时信息，对齐所述样本远端信号和所述样本近端信号，得到对齐后的样本信号；将所述对齐后的样本信号输入频域分块自适应滤波器，对所述样本近端信号进行线性回声消除，得到消除线性回声的样本近端信号；将所述消除线性回声的样本近端信号和所述样本远端信号输入预先训练的残余回声处理模型进行迭代训练，直到满足收敛条件时，停止训练，得到所述残余回声处理模型。7.一种回声处理装置，其特征在于，包括：对齐模块，用于根据获取的远端信号和初始的近端信号之间的延时信息，对齐所述远端信号和所述初始的近端信号，得到对齐后的信号；线性回声消除模块，用于将所述得到对齐后的信号输入频域分块自适应滤波器，对所述初始的近端信号进行线性回声消除，得到消除线性回声后的近端信号；残余回声消除模块，用于将所述消除线性回声后的近端信号和所述远端信号输入预先训练的残余回声处理模型，对所述消除线性回声后的近端信号进行残余回声消除，得到消除残余回声的近端信号。8.根据权利要求7所述的回声处理装置，其特征在于，所述残余回声消除模块，具体用于：将所述消除线性回声后的近端信号和所述远端信号进行离散余弦变换，得到与所述消除线性回声后的近端信号对应的近端离散余弦变换谱和与所述远端信号对应的远端离散余弦变换谱；将所述近端离散余弦变换谱和所述远端离散余弦变换谱拼接成双通道张量；将所述双通道张量输入所述残余回声处理模型的编码层，得到与所述双通道张量对应的初始的抽象特征；将所述初始的抽象特征输入所述残余回声处理模型的长短时记忆层进行特征筛选，得到所述筛选后的抽象特征；将与所述筛选后的抽象特征输入所述残余回声处理模型的解码层，得到所述抽象特征的时频掩码；将所述时频掩码与所述消除线性回声后的近端信号相乘，得到所述消除残余回声的近端信号。
9.一种回声处理设备，其特征在于，包括：处理器和存储器；所述处理器用于执行所述存储器中存储的回声处理方法的程序，以实现权利要求1
‑
6任一项所述的回声处理方法。10.一种存储介质，其特征在于，所述存储介质存储有一个或者多个程序，所述一个或者多个程序可被执行时实现权利要求1
‑
6任一项所述的回声处理方法。

技术总结
本发明涉及一种回声处理方法、装置、设备和存储介质，方法包括根据获取的远端信号和初始的近端信号之间的延时信息，对齐所述远端信号和所述初始的近端信号，得到对齐后的信号；将所述对齐后的信号输入频域分块自适应滤波器，对所述初始的近端信号进行线性回声消除，得到消除线性回声后的近端信号；将所述消除线性回声后的近端信号和所述远端信号输入预先训练的残余回声处理模型，对所述消除线性回声后的近端信号进行残余回声消除，得到消除残余回声的近端信号，本发明的技术方案能够在背景噪声、双讲和非现性失真等情况下实现回声消除，大大提高回声消除的效果和适用场景。大大提高回声消除的效果和适用场景。大大提高回声消除的效果和适用场景。


技术研发人员：马金龙 马凯池 李庆龙 关海欣 梁家恩
受保护的技术使用者：云知声智能科技股份有限公司
技术研发日：2021.06.22
技术公布日：2021/9/24