[发明专利]一种基于混合卷积神经网络的中文唇语识别方法及装置在审
申请号: | 202010186924.0 | 申请日: | 2020-03-17 |
公开(公告)号: | CN111401250A | 公开(公告)日: | 2020-07-10 |
发明(设计)人: | 李晶皎;聂雅昆;闫爱云;王爱侠 | 申请(专利权)人: | 东北大学 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;G06K9/46;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 大连东方专利代理有限责任公司 21212 | 代理人: | 姜威威;李洪福 |
地址: | 110819 辽宁*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于混合卷积神经网络的中文唇语识别方法及装置,属于机器视觉与深度学习领域,方法包括以下步骤:通过摄像机获取说话人的面部图像信息,利用人脸检测器从面部图像信息中检测切割出唇部图像序列,利用混合卷积神经网络对唇部图像序列进行唇部特征提取,将所述唇部特征输入Bi‑GRU模型,获得音素单元的识别概率结果,将所述音素单元的识别概率结果输入连接时序分类器CTC,获得音素单元分类结果,对所述音素单元的分类结果采用引入注意力机制的解码方法进行处理,获得唇语识别结果,该方法解决了现有网络框架不能对中文这类图形语言文字进行识别的问题,为实际场景中应用唇语识别技术提供了可能,可在计算机视觉领域广泛推广。 | ||
搜索关键词: | 一种 基于 混合 卷积 神经网络 中文 识别 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于东北大学,未经东北大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010186924.0/,转载请声明来源钻瓜专利网。
- 上一篇:基于CPCI结构的多运营商4G切换板
- 下一篇:一种智慧站厅