[发明专利]基于场景分类的语音降噪方法、装置、设备及存储介质有效
申请号: | 202111359974.5 | 申请日: | 2021-11-17 |
公开(公告)号: | CN113793620B | 公开(公告)日: | 2022-03-08 |
发明(设计)人: | 汪雪;王昕;蒋志燕;陈诚 | 申请(专利权)人: | 深圳市北科瑞声科技股份有限公司 |
主分类号: | G10L21/0208 | 分类号: | G10L21/0208;G10L25/30;G10L25/78;G06K9/00;G06N3/08 |
代理公司: | 深圳智汇远见知识产权代理有限公司 44481 | 代理人: | 刘洁 |
地址: | 518036 广东省深圳市福田区梅林街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 场景 分类 语音 方法 装置 设备 存储 介质 | ||
1.一种基于场景分类的语音降噪方法,其特征在于,所述方法包括:
获取设备采集的含噪声语音信号;
利用预先训练的噪声分类模型对所述含噪声语音信号中噪声按场景进行分类,得到所述噪声的初始分类结果;
根据噪声功率对所述噪声的初始分类结果进行二次分类,得到所述噪声包含的噪声类型;
根据所述噪声类型自适应选择预先训练的降噪模型,通过所述降噪模型对所述含噪声语音信号进行降噪处理,得到降噪后的语音信号。
2.如权利要求1所述的基于场景分类的语音降噪方法,其特征在于,所述利用预先训练的噪声分类模型对所述含噪声语音信号中噪声按场景进行分类之前,所述方法还包括:
获取预设噪声库N种类型的噪声作为样本集,将所述样本集中每种类型的噪声按预设的比例划分为训练集和测试集,其中所述N为大于1的自然数;
根据预设场景的噪声编号,对所述训练集及所述测试集的噪声类型进行标记,得到所述训练集及测试集中每种噪声对应的真实类型标签值;
利用初始噪声分类模型中的卷积层,提取所述训练集的噪声信号特征图;
利用所述初始噪声分类模型中的池化层,对所述噪声信号特征图进行降维处理,得到压缩后的噪声信号特征图;
利用所述初始噪声分类模型中的批标准化层对所述压缩后的噪声信号特征图进行归一化处理,得到标准化的噪声信号特征图;
利用所述初始噪声分类模型中的softmax层对于所述标准化的噪声信号特征图进行分类,得到所述训练集中噪声的预测类型标签值;
利用预设的损失函数计算所述预测类型标签值与所述真实类型标签值之间的损失值,根据所述损失值对所述初始噪声分类模型进行参数调整,直至所述损失值小于预设的损失阈值,得到初步训练完成的噪声分类模型;
利用所述测试集对所述初步训练完成的噪声分类模型进行测试处理,当所述测试未通过时,再次训练所述噪声分类模型,直至测试通过,得到训练完成的噪声分类模型。
3.如权利要求1所述的基于场景分类的语音降噪方法,其特征在于,所述利用预先训练的噪声分类模型对所述含噪声语音信号中噪声按场景进行分类,得到所述噪声的初始分类结果,包括:
利用语音活动度检测算法检测到所述含噪声语音信号中包含非语音段时,提取连续M帧的非语音段,得到所述含噪声语音信号中的噪声段,其中所述M为大于1的自然数;
利用预先训练的噪声分类模型对所述噪声段按场景进行分类,得到所述噪声的初始分类结果。
4.如权利要求3所述的基于场景分类的语音降噪方法,其特征在于,所述根据噪声功率对所述噪声的初始分类结果进行二次分类,得到所述噪声包含的噪声类型,包括:
对所述含噪声语音信号中噪声段进行预处理,并将预处理后的噪声段进行傅里叶变换得到噪声段的频域信号;
基于最小值搜索法对所述频域信号进行噪声功率谱估计,得到噪声功率谱;
根据所述噪声功率谱中信号功率分布情况的相似度,对所述噪声的初始分类结果进行二次分类,得到所述噪声包含的噪声类型。
5.如权利要求1所述的基于场景分类的语音降噪方法,其特征在于,所述根据所述噪声类型自适应选择预先训练的降噪模型之前,所述方法还包括:
获取预设的训练样本对,所述训练样本对包括纯净语音信号和不同类型噪声对应的带噪语音信号;
利用初始降噪模型对所述带噪语音信号进行降噪处理,得到降噪后的语音信号;
利用预设的神经网络模型复杂度函数,优化所述降噪后的语音信号与所述纯净语音信号之间的损失值;
根据所述损失值对所述初始降噪模型进行参数调整,直至所述损失值小于预设的损失阈值,得到预先训练的降噪模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市北科瑞声科技股份有限公司,未经深圳市北科瑞声科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111359974.5/1.html,转载请声明来源钻瓜专利网。