[发明专利]一种单通道语音分离系统有效

专利信息
申请号: 201910865008.7 申请日: 2019-09-09
公开(公告)号: CN110544482B 公开(公告)日: 2021-11-12
发明(设计)人: 温正棋;范存航 申请(专利权)人: 北京中科智极科技有限公司
主分类号: G10L17/02 分类号: G10L17/02;G10L17/04;G10L17/22;G10L21/0272
代理公司: 厦门福贝知识产权代理事务所(普通合伙) 35235 代理人: 陈远洋
地址: 100089 北京市海*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 通道 语音 分离 系统
【说明书】:

发明公开了一种单通道语音分离系统,该系统深度嵌入式特征提取模块、语音分离模块、区分性训练模块和联合训练模块,其中,深度嵌入式特征提取模块,用于作为深度嵌入式特征的提取器;语音分离模块,与深度嵌入式特征提取模块相连,是基于句子级别的排列不变性训练准则进行语音分离,训练从深度嵌入式特征到各个目标语音信号的映射模型;区分性训练模块,与语音分离模块相连,用于增大不同说话人之间的距离,同时减小相同说话人之间的距离,提高语音分离的性能;联合训练模块,用于联合训练和优化深度嵌入式特征提取模块与语音分离模块;使用该系统可以提高语音分离的性能,使分离后的语音更加清晰、可懂且音质更好。

【技术领域】

本发明涉及电子行业信号处理技术领域,特别涉及一种单通道语音分离系统。

【背景技术】

语音作为人类交流信息的主要手段之一,语音分离一直在语音信号处理中占据着重要的地位。语音分离技术目标是从同时含有多个说话人的混合语音信号中将各个目标源信号分离出来。当一段语音中同时含有多个说话人时,会严重影响语音识别、说话人识别和助听器等系统的性能,因此语音分离技术就显得尤其重要。在语音分离技术的发展过程中,早期的研究主要是采用基于计算场景分析技术、非负矩阵分解和最小均方误差等语音分离方法。但是,这些方法对于说话人独立的语音分离来说,效果十分有限,因此也制约着这些方法的应用。近年来,随着计算机技术的发展,基于深度学习的语音分离方法得到了很大的发展,受到了越来越多人的关注。

基于深度学习的语音分离方法通过训练分离模型,建立混合语音特征参数与各个源目标语音信号的特征参数之间的映射关系,这样对于任意输入的混合语音信号都可以通过建立的分离模型来输出各个源目标语音信号,从而达到语音分离的目的。采用基于深度学习建模的语音分离方法与传统的方法具有很多优点,比如利用深度学习的学习能力,可以很好的学习到混合语音和目标语音信号之间的映射关系。但是,对于说话人独立的语音分离来说,其最大的难点在于解决排列组合问题,即神经网络的输出排列问题。为了解决这一问题,比较有效的办法是利用排列不变性训练准则或者深度聚类算法。但是采用这些方法仅仅使用幅值谱作为特征,不具有区分性,限制着语音分离的性能。

【发明内容】

本发明的目的在于克服上述现有技术的不足,采用如下技术方案:

一种单通道语音分离系统,包括深度嵌入式特征提取模块、语音分离模块、区分性训练模块和联合训练模块,其中,深度嵌入式特征提取模块,用于作为深度嵌入式特征的提取器;语音分离模块,与深度嵌入式特征提取模块通信连接,是基于句子级别的排列不变性训练准则进行语音分离,训练从深度嵌入式特征到各个目标语音信号的映射模型;区分性训练模块,与语音分离模块通信连接,用于增大不同说话人之间的距离,同时减小相同说话人之间的距离,提高语音分离的性能;联合训练模块,用于联合训练和优化深度嵌入式特征提取模块与区分性训练模块。

进一步地,深度嵌入式特征提取模块用于提取深度嵌入式特征,利用深度神经网络训练得到,其训练目标函数为:

其中,V表示深度嵌入式特征,TF表示经过傅里叶变换后的时频块,C表示混合说话人的个数,B表示每一个时频块的源对应关系。

进一步地,语音分离模块与深度嵌入式特征提取模块连接,利用深度嵌入式特征将语音进行分离,分离的输出为理想相位敏感掩蔽值(IPSM)

其中,fγ(*)表示基于深度神经网络的非线性映射函数;

对于语音分离模块的训练方向为:

其中,|Y|表示混合语音的幅值谱,|Xs|表示目标源s的幅值谱,θy和θs分别表示混合语音和目标源s的相位;

语音分离模块的训练目标函数为:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中科智极科技有限公司,未经北京中科智极科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201910865008.7/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top