一种残膜回收机防缠绕挑膜装置的制 一种秧草收获机用电力驱动行走机构

语音转换方法、装置、设备以及存储介质与流程

2021-09-22 21:49:00 来源:中国专利 TAG:音频转换 语音 装置 转换 计算机

技术特征:
1.一种语音转换方法,其特征在于,所述方法包括:将原始语音输入至预设的声码器进行分析,得到所述原始语音对应的基频信息和频谱信息;基于预设的基频转换模型对所述基频信息进行基于cwt变换的转换,得到转换基频信息;基于预设的频谱转换模型对所述频谱信息进行基于mceps变换的转换,得到转换频谱信息;将所述转换基频信息和所述转换频谱信息输入至所述声码器进行语音合成,得到转换语音。2.根据权利要求1所述的语音转换方法,其特征在于,所述基于预设的基频转换模型对所述基频信息进行基于cwt变换的转换,得到转换基频信息,包括:对所述基频信息执行cwt变换,得到cwt基频信息;将所述cwt基频信息输入至预设的基频转换模型进行分析,得到转换cwt基频信息;对所述转换cwt基频信息执行cwt逆变换,得到转换基频信息。3.根据权利要求1所述的语音转换方法,其特征在于,所述基于预设的频谱转换模型对所述频谱信息进行基于mceps变换的转换,得到转换频谱信息,包括:对所述频谱信息执行mceps变换,得到所述频谱信息对应的梅尔频谱倒谱系数;将所述梅尔频谱倒谱系数输入至预设的频谱转换模型进行分析,得到转换梅尔频谱倒谱系数;对所述转换梅尔频谱倒谱系数执行mceps逆变换,得到转换频谱信息。4.根据权利要求1

3任一项所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均是基于stargan模型构建的模型。5.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述stargan模型的基础之上引入感知损失函数来构建模型中的生成器。6.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述stargan模型的基础之上使用switchable normalization代替batch normalization。7.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述stargan模型的基础之上使用residual network建立generator编码器和解码器之间不同层次的映射。8.一种语音转换装置,其特征在于,所述装置包括:语音分析模块,用于将原始语音输入至预设的声码器进行分析,得到所述原始语音对应的基频信息和频谱信息;基频转换模块,用于基于预设的基频转换模型对所述基频信息进行基于cwt变换的转换,得到转换基频信息;频谱转换模块,用于基于预设的频谱转换模型对所述频谱信息进行基于mceps变换的转换,得到转换频谱信息;语音合成模块,用于将所述转换基频信息和所述转换频谱信息输入至所述声码器进行语音合成,得到转换语音。
9.一种计算机设备,其特征在于,所述计算机设备包括:存储有可执行程序代码的存储器;与所述存储器连接的处理器;所述处理器调用所述存储器中存储的所述可执行程序代码,执行如权利要求1

7任一项所述的语音转换方法。10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1

7任一项所述的语音转换方法。

技术总结
本发明公开了一种语音转换方法,包括:将原始语音输入至预设的声码器进行分析,得到所述原始语音对应的基频信息和频谱信息;基于预设的基频转换模型对所述基频信息进行基于CWT变换的转换,得到转换基频信息;基于预设的频谱转换模型对所述频谱信息进行基于MCEPS变换的转换,得到转换频谱信息;将所述转换基频信息和所述转换频谱信息输入至所述声码器进行语音合成,得到转换语音。可见,本发明能够同时基于原始语音的基频和频谱进行原始语音的情感转换,提高最终得到的转换语音的情感相似度和自然度,提高情感语音转换技术的语音转换质量。本发明还涉及区块链技术领域。本发明还涉及区块链技术领域。本发明还涉及区块链技术领域。


技术研发人员:张旭龙 王健宗
受保护的技术使用者:平安科技(深圳)有限公司
技术研发日:2021.06.29
技术公布日:2021/9/21
再多了解一些

本文用于企业家、创业者技术爱好者查询,结果仅供参考。

发表评论 共有条评论
用户名: 密码:
验证码: 匿名发表

相关文章

  • 日榜
  • 周榜
  • 月榜