[发明专利]音频处理方法及装置在审
申请号: | 202110362001.0 | 申请日: | 2021-04-02 |
公开(公告)号: | CN113096685A | 公开(公告)日: | 2021-07-09 |
发明(设计)人: | 王晓红;陈佳路;刘鲁鹏;元海明;李贝;夏龙;杨元祖 | 申请(专利权)人: | 北京猿力未来科技有限公司 |
主分类号: | G10L25/27 | 分类号: | G10L25/27;G10L25/48 |
代理公司: | 北京智信禾专利代理有限公司 11637 | 代理人: | 刘晓楠 |
地址: | 100102 北京市朝阳区广顺南大*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 音频 处理 方法 装置 | ||
1.一种音频处理方法,其特征在于,包括:
获取包含丢失音频片段的待处理音频;
在所述待处理音频中确定与所述丢失音频片段相邻的前音频片段和后音频片段,并构建所述前音频片段的前音频频域特征集合和所述后音频片段的后音频频域特征集合;
将所述前音频频域特征集合和所述后音频频域特征集合进行拼接,并将拼接后的音频频域特征集合输入至音频处理模型进行处理获得局部频域帧序列;
基于所述前音频片段对应的前频域帧序列、所述局部频域帧序列以及所述后音频片段对应的后频域帧序列生成用于替换所述待处理音频的目标音频。
2.根据权利要求1所述的音频处理方法,其特征在于,所述在所述待处理音频中确定与所述丢失音频片段相邻的前音频片段和后音频片段,包括:
在所述待处理音频定位所述丢失音频片段;
选择所述丢失音频片段之前设定时长的音频片段确定为所述前音频片段,以及所述丢失音频片段之后设定时长的音频片段确定为所述后音频片段。
3.根据权利要求1所述的音频处理方法,其特征在于,所述构建所述前音频片段的前音频频域特征集合和所述后音频片段的后音频频域特征集合,包括:
对所述前音频片段和所述后音频片段进行预处理,获得所述前音频片段对应的所述前频域帧序列以及所述后音频片段对应的所述后频域帧序列;
基于所述前频域帧序列构建所述前音频频域特征集合,以及基于所述后频域帧序列构建所述后音频频域特征集合。
4.根据权利要求3所述的音频处理方法,其特征在于,所述对所述前音频片段和所述后音频片段进行预处理,获得所述前音频片段对应的所述前频域帧序列以及所述后音频片段对应的所述后频域帧序列,包括:
对所述前音频片段和所述后音频片段进行分帧处理,获得所述前音频片段对应的前音频时域帧序列以及所述后音频片段对应的后音频时域帧序列;
基于预设的补充信息和变换参数对所述前音频时域帧序列和所述后音频时域帧序列进行变换处理,获得所述前音频片段对应的所述前频域帧序列以及所述后音频片段对应的所述后频域帧序列。
5.根据权利要求3所述的音频处理方法,其特征在于,所述基于所述前频域帧序列构建所述前音频频域特征集合,以及基于所述后频域帧序列构建所述后音频频域特征集合,包括:
确定所述前频域帧序列对应的前频域信息,以及所述后频域帧序列对应的后频域信息;
基于所述前频域信息确定所述前频域帧序列的前频域帧、前分量和前复数,以及所述后频域信息确定所述后频域帧序列的后频域帧、后分量和后复数;
基于所述前频域帧、所述前分量和所述前复数构建所述前音频频域特征集合,以及所述后频域帧、所述后分量和所述后复数构建所述后音频频域特征集合。
6.根据权利要求1所述的音频处理方法,其特征在于,所述将拼接后的音频频域特征集合输入至音频处理模型进行处理获得局部频域帧序列,包括:
将拼接后的音频频域特征集合输入至所述音频处理模型,通过所述音频处理模型中的编码模块进行编码处理,获得编码特征集合;
通过所述音频处理模型中的解码模块对所述编码特征集合进行处理,获得解码特征集合;
基于所述解码特征集合生成目标音频频域特征集合;
通过所述音频处理模块中的输出模块对所述目标音频频域特征集合进行处理,获得所述音频处理模型输出的所述局部频域帧序列。
7.根据权利要求6所述的音频处理方法,其特征在于,所述基于所述解码特征集合生成目标音频频域特征集合,包括:
通过所述音频处理模型中的卷积模块对所述解码特征集合进行处理,获得初始音频频域特征集合;
通过所述音频处理模型中的掩码模块对所述初始音频频域特征集合进行处理,获得中间音频频域特征集合;
基于所述音频处理模型中的参考幅值对所述中间音频频域特征集合进行调整,获得所述目标音频频域特征集合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京猿力未来科技有限公司,未经北京猿力未来科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110362001.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种水冷式解决啸叫问题的冷水机
- 下一篇:曝光对准的补偿方法及补偿系统