三维音频源空间化的制作方法

技术特征：
1.一种方法，包括：由被配置成执行音频源空间化的处理电路接收来自源位置处的音频源的音频数据，所述音频数据表示被配置成经由收听者位置处的收听者所听到的多个扩音器被转换为一定频率的声音的音频波形，所述多个扩音器中的每一个具有相应的扩音器位置；响应于所述音频信号的频率低于指定阈值，由所述处理电路对所述多个扩音器执行串扰消除cc操作以产生由该扩音器发出的相应音频信号的振幅和相位以确定空间化线索；以及响应于所述音频信号的频率高于所述指定阈值，由所述处理电路对所述多个扩音器执行基于向量的振幅平移vbap操作以产生用于该扩音器的相应权重，用于所述多个扩音器中的每一个的相应权重表示因子，由该扩音器发出的音频信号与所述因子相乘以确定空间化线索。2.根据权利要求1所述的方法，其中，对所述多个扩音器执行所述cc操作包括：随时间跟踪所述收听者的位置和定向。3.根据权利要求1或者2所述的方法，其中，所述多个扩音器中的扩音器的数量是偶数，并且其中，对所述多个扩音器执行所述cc操作包括：向扩音器的对应用被配置成向所述收听者提供双耳声场的头部相关传递函数hrtf，所述hrtf是基于参数化刚性球模型。4.根据权利要求1至3中的任一项所述的方法，其中，所述指定阈值在1000hz与2000hz之间。5.根据权利要求1至4中的任一项所述的方法，其中，对所述多个扩音器执行所述vbap操作包括：生成扩音器矩阵，所述扩音器矩阵具有作为与所述收听者位置和所述多个扩音器中的每一个的相应扩音器位置之间的差平行的向量的分量的元素；生成源向量，所述源向量具有作为与所述收听者位置和所述源位置之间的差平行的向量的分量的元素；以及对所述扩音器矩阵和所述源向量执行伪逆操作以产生具有分量的权重向量，所述权重向量的每个分量表示用于所述多个扩音器中的每一个的相应权重。6.根据权利要求5所述的方法，其中，所述收听者与所述多个扩音器中的第一扩音器之间的距离不同于所述收听者与所述多个扩音器中的第二扩音器之间的距离。7.根据权利要求5或6所述的方法，其中，所述多个扩音器中的扩音器的数量大于三，并且其中，对所述扩音器矩阵和所述源向量执行所述伪逆操作包括：生成所述扩音器逆和所述源向量的彭若斯伪逆的乘积。8.根据权利要求7所述的方法，其中，对所述扩音器矩阵和所述源向量执行所述伪逆操作进一步包括：使所述权重向量的分量的平方和最小化。9.根据权利要求7或8所述的方法，其中，所述权重向量的分量小于零，并且其中，所述方法进一步包括：移除与所述权重向量的小于零的所述分量所对应的所述扩音器相对应的所述扩音器矩阵的元素，以形成减小的扩音器矩阵；以及
对所述减小的扩音器矩阵和所述源向量执行所述伪逆操作，以产生减小的权重向量。10.根据权利要求5至9中的任一项所述的方法，进一步包括：将所述权重向量的分量中的每一个乘以相应的比例因子，所述比例因子与所述收听者和所述权重向量的该分量所对应的所述多个扩音器中的所述扩音器之间的距离成比例。11.一种包括非暂时性存储介质的计算机程序产品，所述计算机程序产品包括代码，所述代码当由被配置成执行音频源空间化的处理电路执行时使所述处理电路执行方法，所述方法包括：接收来自源位置处的音频源的音频数据，所述音频数据表示被配置成经由收听者位置处的收听者所听到的多个扩音器被转换为一定频率的声音的音频波形，所述多个扩音器中的每一个具有相应的扩音器位置；生成扩音器矩阵，所述扩音器矩阵具有作为与所述收听者位置和所述多个扩音器中的每一个的相应扩音器位置之间的差平行的向量的分量的元素；生成源向量，所述源向量具有作为与所述收听者位置和所述源位置之间的差平行的向量的分量的元素；以及对所述扩音器矩阵和所述源向量执行伪逆操作以产生具有分量的权重向量，所述权重向量的每个分量表示用于所述多个扩音器中的每一个的相应权重。12.根据权利要求11所述的计算机程序产品，其中，所述收听者与所述多个扩音器中的第一扩音器之间的距离不同于所述收听者与所述多个扩音器中的第二扩音器之间的距离。13.根据权利要求11或12所述的计算机程序产品，其中，所述多个扩音器中的扩音器的数量大于三，并且其中，对所述扩音器矩阵和所述源向量执行所述伪逆操作包括：生成所述扩音器逆和所述源向量的彭若斯伪逆的乘积。14.根据权利要求13所述的计算机程序产品，其中，对所述扩音器矩阵和所述源向量执行所述伪逆操作进一步包括：使所述权重向量的分量的平方和最小化。15.根据权利要求13或14所述的计算机程序产品，其中，所述权重向量的分量小于零，并且其中，所述方法进一步包括：移除与所述权重向量的小于零的所述分量所对应的所述扩音器相对应的所述扩音器矩阵的元素，以形成减小的扩音器矩阵；以及对所述减小的扩音器矩阵和所述源向量执行所述伪逆操作，以产生减小的权重向量。16.根据权利要求11至15中的任一项所述的计算机程序产品，进一步包括：将所述权重向量的分量中的每一个乘以相应的比例因子，所述比例因子与所述收听者和所述权重向量的该分量所对应的所述多个扩音器中的所述扩音器之间的距离成比例。17.根据权利要求11至16中的任一项所述的计算机程序产品，其中，生成所述扩音器矩阵和所述源向量是对所述多个扩音器执行基于向量的振幅平移vbap操作的一部分，并且其中，所述方法进一步包括：响应于所述音频信号的频率低于指定阈值，对所述多个扩音器执行串扰消除cc操作以产生由该扩音器发出的相应音频信号的振幅和相位以确定空间化线索；以及响应于所述音频信号的频率高于所述指定阈值，对所述多个扩音器执行所述vbap操作
以产生用于该扩音器的相应权重。18.根据权利要求17所述的计算机程序产品，其中，对所述多个扩音器执行所述cc操作包括：随时间跟踪所述收听者的位置和定向。19.根据权利要求17或18所述的计算机程序产品，其中，所述多个扩音器中的扩音器的数量是偶数，并且其中，对所述多个扩音器执行所述cc操作包括：向扩音器的对应用被配置成向所述收听者提供双耳声场的头部相关传递函数hrtf，所述hrtf基于参数化刚性球模型。20.一种被配置成执行音频源空间化的电子装置，所述电子装置包括：存储器；以及控制电路，所述控制电路耦合到所述存储器，所述控制电路被配置成：接收来自源位置处的音频源的音频数据，所述音频数据表示被配置成经由收听者位置处的收听者所听到的多个扩音器被转换为一定频率的声音的音频波形，所述多个扩音器中的每一个具有相应的扩音器位置；响应于所述音频信号的频率低于指定阈值，对所述多个扩音器执行串扰消除cc操作以产生由该扩音器发出的相应音频信号的振幅和相位以确定空间化线索；以及响应于所述音频信号的频率高于所述指定阈值，对所述多个扩音器执行基于向量的振幅平移vbap操作以产生用于该扩音器的相应权重，用于所述多个扩音器中的每一个的相应权重表示因子，由该扩音器发出的音频信号与所述因子相乘以确定空间化线索。

技术总结
在远程呈现系统中递送音频的技术包括指定频率阈值，低于该频率阈值串扰消除(CC)被使用，高于该频率阈值VBAP被使用。在一些实施方式中，这样的频率阈值在1000Hz与2000Hz之间。此外，在一些实施方式中，改进的技术包括通过形成超定系统以一次为所有扩音器确定振幅权重来修改用于多于三个扩音器的VBAP。重来修改用于多于三个扩音器的VBAP。重来修改用于多于三个扩音器的VBAP。


技术研发人员：约瑟夫
受保护的技术使用者：谷歌有限责任公司
技术研发日：2019.06.12
技术公布日：2021/11/19