[发明专利]基于多线索相互蒸馏和自蒸馏的连续手语识别方法在审
| 申请号： | 202210528751.5 | 申请日： | 2022-05-16 |
| 公开（公告）号： | CN114821802A | 公开（公告）日： | 2022-07-29 |
| 发明（设计）人： | 于明;刘月豪;薛翠红;于洋;郝小可;朱叶;阎刚;郭迎春;师硕 | 申请（专利权）人： | 河北工业大学;天津理工大学 |
| 主分类号： | G06V40/20 | 分类号： | G06V40/20;G06V40/10;G06V40/16;G06V20/40;G06V10/40;G06V10/764;G06V10/82;G06N3/04;G06N3/08;G06N5/04;G06K9/62 |
| 代理公司： | 天津翰林知识产权代理事务所(普通合伙) 12210 | 代理人： | 蔡运红 |
| 地址： | 300130 天津市红桥区*** | 国省代码： | 天津;12 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明为基于多线索相互蒸馏和自蒸馏的连续手语识别方法，包括获取手语视频，从手语视频中提取脸部、左手手部以及右手手部视频并进行预处理，从视频中提取空间特征，再从空间特征中提取具有短期时间联系的手语词级特征，从手语词级特征中提取具有长期时间联系的上下文级特征，再利用全连接层和激活函数，获得归一化的分类概率矩阵；基于获得的分类概率矩阵构建总损失函数，并训练神经网络；将训练后的神经网络用于预测手语，并输出手语标签。该方法利用了原始手语图像中的脸部信息和手部信息，通过相互蒸馏的方式充分利用脸部信息和手部信息的知识，解决了局部信息利用不充分的问题，提高了神经网络的泛化能力；通过自蒸馏的方式增加了神经网络中不同模块之间的协调性。 | ||
| 搜索关键词： | 基于 线索 相互 蒸馏 连续 手语 识别 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于河北工业大学;天津理工大学，未经河北工业大学;天津理工大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202210528751.5/，转载请声明来源钻瓜专利网。
