[发明专利]语音转换方法、装置、设备以及存储介质在审
申请号: | 202110731052.6 | 申请日: | 2021-06-29 |
公开(公告)号: | CN113421576A | 公开(公告)日: | 2021-09-21 |
发明(设计)人: | 张旭龙;王健宗 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G10L21/007 | 分类号: | G10L21/007;G10L25/27;G10L25/18;G10L25/48 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 周雷 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 语音 转换 方法 装置 设备 以及 存储 介质 | ||
1.一种语音转换方法,其特征在于,所述方法包括:
将原始语音输入至预设的声码器进行分析,得到所述原始语音对应的基频信息和频谱信息;
基于预设的基频转换模型对所述基频信息进行基于CWT变换的转换,得到转换基频信息;
基于预设的频谱转换模型对所述频谱信息进行基于MCEPS变换的转换,得到转换频谱信息;
将所述转换基频信息和所述转换频谱信息输入至所述声码器进行语音合成,得到转换语音。
2.根据权利要求1所述的语音转换方法,其特征在于,所述基于预设的基频转换模型对所述基频信息进行基于CWT变换的转换,得到转换基频信息,包括:
对所述基频信息执行CWT变换,得到CWT基频信息;
将所述CWT基频信息输入至预设的基频转换模型进行分析,得到转换CWT基频信息;
对所述转换CWT基频信息执行CWT逆变换,得到转换基频信息。
3.根据权利要求1所述的语音转换方法,其特征在于,所述基于预设的频谱转换模型对所述频谱信息进行基于MCEPS变换的转换,得到转换频谱信息,包括:
对所述频谱信息执行MCEPS变换,得到所述频谱信息对应的梅尔频谱倒谱系数;
将所述梅尔频谱倒谱系数输入至预设的频谱转换模型进行分析,得到转换梅尔频谱倒谱系数;
对所述转换梅尔频谱倒谱系数执行MCEPS逆变换,得到转换频谱信息。
4.根据权利要求1-3任一项所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均是基于StarGAN模型构建的模型。
5.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述StarGAN模型的基础之上引入感知损失函数来构建模型中的生成器。
6.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述StarGAN模型的基础之上使用Switchable Normalization代替BatchNormalization。
7.根据权利要求4所述的语音转换方法,其特征在于,所述基频转换模型和所述频谱转换模型均在所述StarGAN模型的基础之上使用Residual Network建立generator编码器和解码器之间不同层次的映射。
8.一种语音转换装置,其特征在于,所述装置包括:
语音分析模块,用于将原始语音输入至预设的声码器进行分析,得到所述原始语音对应的基频信息和频谱信息;
基频转换模块,用于基于预设的基频转换模型对所述基频信息进行基于CWT变换的转换,得到转换基频信息;
频谱转换模块,用于基于预设的频谱转换模型对所述频谱信息进行基于MCEPS变换的转换,得到转换频谱信息;
语音合成模块,用于将所述转换基频信息和所述转换频谱信息输入至所述声码器进行语音合成,得到转换语音。
9.一种计算机设备,其特征在于,所述计算机设备包括:
存储有可执行程序代码的存储器;
与所述存储器连接的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行如权利要求1-7任一项所述的语音转换方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-7任一项所述的语音转换方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110731052.6/1.html,转载请声明来源钻瓜专利网。