[发明专利]基于卷积神经网络的语音识别方法有效

专利信息
申请号: 201811112506.6 申请日: 2018-09-25
公开(公告)号: CN109272990B 公开(公告)日: 2021-11-05
发明(设计)人: 曹毅;张威;翟明浩;刘晨;黄子龙;李巍 申请(专利权)人: 江南大学
主分类号: G10L15/06 分类号: G10L15/06;G10L15/16
代理公司: 无锡盛阳专利商标事务所(普通合伙) 32227 代理人: 顾吉云;郭金玉
地址: 214000 江苏*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 卷积 神经网络 语音 识别 方法
【权利要求书】:

1.基于卷积神经网络的语音识别方法,其包括以下步骤:

S1:输入原始语音,对所述原始语音信号进行预处理,并进行相关变换处理;

S2:提取出反映语音信号特征的关键特征参数,形成特征矢量序列;

S3:构建声学模型;

S4:训练所述声学模型,得到训练好的声学模型;

S5:将步骤S2中得到的待识别的所述特征矢量序列输入到所述训练好的声学模型中得到识别结果;

S6:以步骤S5中得到的所述识别结果为基础进行后续的运算,即得到能够以最大概率输出该语音信号的词串,所述词串即所述原始语音被识别后的语言文字;

其特征在于:

步骤S3中采用基于DCNN网络模型为基础、以联结主义时间分类器CTC作为损失函数,构建端对端方式的所述声学模型;

所述声学模型的结构包括依次设置的多个卷积层结构、两个全连接层、CTC损失函数;

所述多个卷积层结构中第一层、第二层采用32个卷积核的卷积层提取语音特征;第三层、第四层采用64个卷积核的所述卷积层提取语音特征;第五层开始为多层连续的128个卷积核的所述卷积层提取语音更高层特征;

如果所述多个卷积层结构中所述卷积层的层数为偶数,从第一个所述卷积层开始每两个连续的所述卷积层后跟着一个池化层;如果所述多个卷积层结构中所述卷积层的层数为奇数,则从第一个所述卷积层开始每两个连续的所述卷积层后跟着一个池化层,最后三个所述卷积层连续操作后再进行一次所述池化层的池化操作;

所述多个卷积层的结构共有8层或者9层。

2.根据权利要求1所述基于卷积神经网络的语音识别方法,其特征在于:步骤S4中所述声学模型的训练公式如下:

Hi= Wi* X + bi

其中:

i=1,……k,

Hi代表第i张特征图,

Wi代表第i张特征图的权重,

X代表前一层输入的特征图,

bi代表第i张特征图的偏置项。

3.根据权利要求1所述基于卷积神经网络的语音识别方法,其特征在于:所述CTC损失函数为:

其中:

为softmax函数的计算公式,

表示基于输入x的输出π路径的概率,

表示输出label序列的概率是多少路径的概率和,

x代表输入,

X = x1,x2,……xT, 代表输入序列,下标代表时间从1到T,

Y = y1,y2,……yk,代表与X对应的输出,

yi= yi1,yi2,……,yik,代表输出序列第i帧的条件概率分布,其中i = 1,2,……K,

π表示输出路径,

μ表示输出label序列,

π与μ之间是多对一的关系,

B表示路径到label序列的映射关系。

4.根据权利要求1所述基于卷积神经网络的语音识别方法,其特征在于:所述卷积层的卷积核的尺寸全部设置为3×3。

5.根据权利要求1所述基于卷积神经网络的语音识别方法,其特征在于:所述池化层为2×2的步长为2的最大池化操作。

6.根据权利要求1所述基于卷积神经网络的语音识别方法,其特征在于:步骤S2中采用语谱图作为语音特征;所述语谱图中帧长设置为25ms,帧移设置为10ms,窗函数使用汉明窗函数。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江南大学,未经江南大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201811112506.6/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top