[发明专利]手势识别方法及装置、存储介质及电子设备在审
申请号: | 202210545192.9 | 申请日: | 2022-05-19 |
公开(公告)号: | CN114898404A | 公开(公告)日: | 2022-08-12 |
发明(设计)人: | 李国鸣;赵阳;潘涛;朱勰戎;董兰芳 | 申请(专利权)人: | 招商银行股份有限公司;中国科学技术大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V40/20;G06V10/30;G06V10/34;G06V10/44;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08;G06N20/10 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 秦晓君 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 手势 识别 方法 装置 存储 介质 电子设备 | ||
1.一种手势识别方法,其特征在于,应用于手势识别装置,包括:
获取经过预处理的骨架序列;
确定所述骨架序列中每帧骨架图的各个关节点的坐标;
基于每帧所述骨架图的各个关节点的坐标,确定每帧所述骨架图的关节点集距离特征;
基于每帧所述骨架图的各个关节点的坐标,确定每帧所述骨架图的关节点集方向特征;
调用预设的特征提取模块,提取所述骨架序列的运动轨迹特征;
对所述骨架序列的运动轨迹特征、各帧所述骨架图的关节点集距离特征以及关节点方向特征进行处理,得到所述骨架序列的手势识别结果。
2.根据权利要求1所述的方法,其特征在于,骨架序列的预处理的过程包括:
采集待识别视频;
从所述待识别视频中提取出初始的骨架序列;
对所述初始的骨架序列进行降噪处理,得到降噪后的骨架序列;
对降噪后的骨架序列进行归一化处理,完成对骨架序列的预处理。
3.根据权利要求1所述的方法,其特征在于,所述基于每帧所述骨架图的各个关节点的坐标,确定每帧所述骨架图的关节点集距离特征,包括:
对于每帧所述骨架图,将该帧骨架图中的各个关节点两两进行组合,得到多个第一关节点组;
对于每帧所述骨架图,应用该帧骨架图中每个关节点的坐标,确定该帧骨架图的每个第一关节点组的欧式距离,并对各个所述欧式距离进行处理,得到该帧骨架图的关节点集距离特征。
4.根据权利要求1所述的方法,其特征在于,所述基于每帧所述骨架图的各个关节点的坐标,确定每帧所述骨架图的关节点集方向特征,包括:
在每帧所述骨架图的各个关节点中选择起始关节点;
对于每帧所述骨架图,将该骨架图的起始关节点与该骨架图中剩余的每个关节点进行匹配,得到多个第二关节点组;
基于每帧所述骨架图的各个关节点的坐标,确定每帧所述骨架图的每个第二关节点组的偏移量;
基于每帧所述骨架图的各个偏移量,得到每帧所述骨架图的关节点方向锥特征;
确定每帧所述骨架图的无向图,所述无向图由所述骨架图的各个关节点组成;
对于每帧所述骨架图,应用所述骨架图的各个关节点的坐标,对所述骨架图的无向图进行处理,得到所述骨架图的关节点方向树特征;
基于每帧所述骨架图的关节点方向锥特征和关节点方向树特征,得到每帧所述骨架图的关节点集方向特征。
5.根据权利要求4所述的方法,其特征在于,所述应用所述骨架图的各个关节点的坐标,对所述骨架图的无向图进行处理,得到所述骨架图的关节点方向树特征,包括:
创建第一节点列表、第二节点列表以及特征列表;
在所述无向图的各个关节点中选择根关节点,并将所述根关节点加入所述第一节点列表和第二节点列表中;
判断所述第一节点列表是否为空;
若确定所述第一节点列表不为空,则从所述第一节点列表中输出目标关节点;
基于所述第二节点列表和所述目标关节点,判断所述无向图的边集中是否存在与所述目标关节点对应的无向边;
若确定所述无向图的边集中存在与所述目标关节点对应的无向边,则将与所述目标关节点对应的各个无向边均确定为目标无向边;
基于每个所述目标无向边的关节点的坐标,确定每个所述目标无向边的向量,并将各个所述向量添加至所述特征列表中;
基于每个所述目标无向边的两个关节点,更新所述第一节点列表和所述第二节点列表,并返回执行判断所述第一节点列表是否为空的步骤;
若确定所述第一节点列表为空,则基于所述特征列表中的各个向量,得到所述骨架图的关节点方向树特征。
6.根据权利要求5所述的方法,其特征在于,还包括:
若确定所述无向图的边集中不存在与所述目标关节点对应的无向边,则返回执行判断所述节点列表是否为空的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于招商银行股份有限公司;中国科学技术大学,未经招商银行股份有限公司;中国科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210545192.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种网络授课用课程监测监督装置
- 下一篇:绝缘子状态识别方法及系统