[发明专利]啸叫抑制方法及装置、存储介质、电子设备在审
申请号: | 202210307288.1 | 申请日: | 2022-03-25 |
公开(公告)号: | CN114863941A | 公开(公告)日: | 2022-08-05 |
发明(设计)人: | 陈志鹏;阮良;陈功;陈丽;郝一亚 | 申请(专利权)人: | 杭州网易智企科技有限公司 |
主分类号: | G10L21/02 | 分类号: | G10L21/02;G10L21/0208;G10L21/0264 |
代理公司: | 北京律智知识产权代理有限公司 11438 | 代理人: | 孙宝海 |
地址: | 310052 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 抑制 方法 装置 存储 介质 电子设备 | ||
1.一种啸叫抑制方法,其特征在于,应用于第一设备,所述第一设备用于与第二设备进行即时通信,所述第一设备和所述第二设备归属于同一声学环路,所述第一设备包括第一通信模块、第一音频采集模块和第一音频播放模块,所述第二设备包括第二通信模块、第二音频采集模块和第二音频播放模块,所述方法包括:
提取待处理音频信号的音频特征,所述待处理音频信号为所述第一设备通过其第一音频采集模块所采集到的音频信号,所述待处理音频信号为声源所发出的声学信号与所述第二音频播放模块所播放的第二音频信号之叠加;
将所述音频特征输入至啸叫检测模型,所述啸叫检测模型输出所述待处理音频信号的啸叫特征参数;
将所述啸叫特征参数以及所述音频特征输入至啸叫抑制模型;
根据所述啸叫抑制模型的输出,获得啸叫抑制音频信号。
2.根据权利要求1所述的啸叫抑制方法,其特征在于,所述声学环路为基于所述第一音频采集模块、第一通信模块、第二通信模块以及第二音频播放模块所产生的音频信号传输路径,所述待处理音频信号依次经由所述第一音频采集模块、第一通信模块、第二通信模块、第二音频播放模块以及第一音频采集模块在所述声学环路中完成闭环传输。
3.根据权利要求2所述的啸叫抑制方法,其特征在于,所述第二音频播放模块位于所述第一音频采集模块的拾音距离内,且所述第二音频播放模块的播放音量足以使所述第二音频信号被所述第一音频采集模块所拾取。
4.根据权利要求1所述的啸叫抑制方法,其特征在于,所述音频特征为所述待处理音频信号的频谱特征、bark谱特征、梅尔谱特征、梅尔倒谱特征以及基频特征中的一种。
5.根据权利要求1所述的啸叫抑制方法,其特征在于,所述啸叫检测模型依次包括输入处理层、第一中间处理层以及分类输出层,所述音频特征赋值于所述输入处理层,以经由所述输入处理层输入所述第一中间处理层,所述第一中间处理层用以获取所述音频特征的局部特征,并将所述局部特征作为啸叫中间特征,所述分类输出层用以对所述啸叫中间特征进行分类获得啸叫结果特征,所述啸叫中间特征与所述啸叫结果特征用以作为所述啸叫特征参数输入至所述啸叫抑制模型。
6.根据权利要求5所述的啸叫抑制方法,其特征在于,所述啸叫检测模型还依次包括连接于所述输入处理层和所述中间处理层之间的主干层以及循环层,所述主干层用以对输入至所述主干层的数据进行卷积和/或池化处理,所述循环层用以建立所述循环层的输入数据和所述循环层的输出数据之间的关联关系,
所述啸叫检测模型还包括连接于所述第一中间处理层和所述分类输出层之间的注意力层,所述注意力层用以对输入至所述注意力层的数据进行加权求和。
7.根据权利要求5所述的啸叫抑制方法,其特征在于,所述啸叫抑制模型依次包括编码器、第二中间处理层以及解码器,所述编码器用以对所述音频特征以及所述啸叫结果特征执行特征编码获得编码特征,所述第二中间处理层用以对所述编码特征以及所述啸叫中间特征执行特征筛选,所述解码器用以对经筛选的编码特征执行特征解码。
8.一种啸叫抑制装置,其特征在于,应用于第一设备,所述第一设备用于与第二设备进行即时通信,所述第一设备和所述第二设备归属于同一声学环路,所述第一设备包括第一通信模块、第一音频采集模块和第一音频播放模块,所述第二设备包括第二通信模块、第二音频采集模块和第二音频播放模块,所述装置包括:
音频特征提取模块,用于提取待处理音频信号的音频特征,所述待处理音频信号为所述第一设备通过其第一音频采集模块所采集到的音频信号,所述待处理音频信号为声源所发出的声学信号与所述第二音频播放模块所播放的第二音频信号之叠加;
啸叫检测模块,用于将所述音频特征输入至啸叫检测模型,所述啸叫检测模型输出所述待处理音频信号的啸叫特征参数;
啸叫抑制输入模块,用于将所述啸叫特征参数以及所述音频特征输入至啸叫抑制模型;
啸叫抑制输出模块,用于根据所述啸叫抑制模型的输出,获得啸叫抑制音频信号。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州网易智企科技有限公司,未经杭州网易智企科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210307288.1/1.html,转载请声明来源钻瓜专利网。