[发明专利]基于ResNet34网络-注意力机制的连续手语识别方法及装置在审
申请号: | 202210709795.8 | 申请日: | 2022-06-23 |
公开(公告)号: | CN114943990A | 公开(公告)日: | 2022-08-26 |
发明(设计)人: | 沈丛;杨甜;东天宇;幸高松;陆星元;袁甜甜;陈胜勇 | 申请(专利权)人: | 天津理工大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/774;G06V10/82;G06V10/762;G06V10/80;G06V10/764;G06N3/04;G06N3/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 300384 *** | 国省代码: | 天津;12 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种基于ResNet34网络‑注意力机制的连续手语识别方法及装置,涉及人工智能识别技术领域,包括:S1:获取第一视频数据训练集,并采用KFE聚类算法获取第二视频数据训练集,S2:构建ResNet34网络拓扑,将PSA通道注意力机制和RCC空间注意力机制融合成PR注意力机制,并与ResNet34网络拓扑进行集成以提取第二视频数据集的特征信息;S3:构建BiLSTM网络拓扑以对第二视频数据集的特征信息进行编码,采用LSTM‑CTC端对端网络结构拓扑以对编码后第二视频数据集进行解码;S4:构建目标函数,以对ResNet34网络拓扑与PR注意力机制集成后的网络拓扑参数、BiLSTM网络拓扑参数以及LSTM‑CTC端对端网络结构拓扑参数进行调整。本发明可以缓解现有技术中视频冗余造成的神经网络结构过度拟合的技术问题。 | ||
搜索关键词: | 基于 resnet34 网络 注意力 机制 连续 手语 识别 方法 装置 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天津理工大学,未经天津理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202210709795.8/,转载请声明来源钻瓜专利网。