[发明专利]语音处理方法和装置以及声码器和声码器的训练方法在审

专利信息
申请号: 202110794822.1 申请日: 2021-07-14
公开(公告)号: CN113470616A 公开(公告)日: 2021-10-01
发明(设计)人: 张旭;张新;李楠;郑羲光;张晨 申请(专利权)人: 北京达佳互联信息技术有限公司
主分类号: G10L13/04 分类号: G10L13/04;G10L25/03;G10L25/30
代理公司: 北京铭硕知识产权代理有限公司 11286 代理人: 刘超;苏银虹
地址: 100085 北京市海淀*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 语音 处理 方法 装置 以及 声码 训练
【权利要求书】:

1.一种语音处理方法,其特征在于,所述语音处理方法包括:

对高采样率梅尔谱特征进行下采样来获取低采样率梅尔谱特征;

基于低采样率梅尔谱特征利用声码器的第一神经网络来获得低时域信号;

通过对低时域信号进行上采样来获得高时域信号;

基于高采样率梅尔谱特征和高时域信号利用声码器的第二神经网络来获得与高采样率梅尔谱特征相应的语音信号。

2.根据权利要求1所述的语音处理方法,其特征在于,基于低采样率梅尔谱特征利用声码器的第一神经网络来获得低时域信号的步骤包括:

针对低时域信号的每个采样点执行以下操作:

基于与低采样率梅尔谱特征相应的幅度谱计算低时域信号的当前采样点的第一估计值;

基于低采样率梅尔谱特征经由第一神经网络的第一编码器的运算来获得第一嵌入向量;

基于第一嵌入向量、第一估计值和针对第一神经网络的第一解码器在前一时刻的采样点误差经由第一解码器的运算来获得低时域信号的当前采样点。

3.根据权利要求1所述的语音处理方法,其特征在于,基于高采样率梅尔谱特征和高时域信号利用声码器的第二神经网络来获得与高采样率梅尔谱特征相应的语音信号的步骤包括:

针对所述语音信号的每个采样点执行以下操作:

基于与高采样率梅尔谱特征相应的幅度谱计算所述语音信号的当前采样点的第二估计值;

基于高采样率梅尔谱特征经由第二神经网络的第二编码器的运算来获得第二嵌入向量;

基于第二嵌入向量、高时域信号的当前采样点、第二估计值、针对高时域信号的前一时刻的采样点误差、针对第二神经网络的第二解码器在前一时刻的采样点误差和第二解码器在前一时刻输出的采样点经由第二解码器的运算来获得所述语音信号的当前采样点。

4.根据权利要求1所述的语音处理方法,其特征在于,高采样率梅尔谱特征是通过对输入的文字执行梅尔谱预测得到的。

5.一种声码器的训练方法,其特征在于,所述训练方法包括:

获取样本集,其中,所述样本集包括高采样率时域信号、低采样率时域信号、低频域特征和高频域特征,其中,所述低采样率时域信号是对所述高采样率时域信号进行下采样获得的,低频域特征是所述低采样率时域信号的梅尔谱特征,高频域特征是所述高采样率时域信号的梅尔谱特征;

基于低频域特征利用声码器的第一神经网络来获得低时域信号;

通过对低时域信号进行上采样来获得高时域信号;

基于高频域特征和高时域信号利用声码器的第二神经网络来获得合成信号;

利用低时域信号、所述低采样率时域信号、所述合成信号和所述高采样率时域信号来构建损失函数;

基于由所述损失函数计算的损失来训练所述声码器的参数。

6.根据权利要求5所述的训练方法,其特征在于,利用低时域信号、所述低采样率时域信号、所述合成信号和所述高采样率时域信号来构建损失函数的步骤包括:

利用低时域信号和所述低采样率时域信号来构建第一交叉熵损失函数;

利用所述合成信号和所述高采样率时域信号来构建第二交叉熵损失函数;

由第一交叉熵损失函数和第二交叉熵损失函数来构成所述损失函数。

7.一种语音处理装置,其特征在于,所述语音处理装置包括:

获取模块,被配置为对高采样率梅尔谱特征进行下采样来获取低采样率梅尔谱特征;以及

处理模块,被配置为:

基于低采样率梅尔谱特征利用声码器的第一神经网络来获得低时域信号;

通过对低时域信号进行上采样来获得高时域信号;

基于高采样率梅尔谱特征和高时域信号利用声码器的第二神经网络来获得与高采样率梅尔谱特征相应的语音信号。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110794822.1/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top