[发明专利]动态手势的识别方法、装置、设备及计算机可读存储介质在审
申请号: | 202210773664.6 | 申请日: | 2022-07-01 |
公开(公告)号: | CN115147927A | 公开(公告)日: | 2022-10-04 |
发明(设计)人: | 马思研;陈丽莉;吕耀宇;李鑫恺;李言 | 申请(专利权)人: | 京东方科技集团股份有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V40/10;G06T7/277;G06T7/70;G06T7/55 |
代理公司: | 北京聿宏知识产权代理有限公司 11372 | 代理人: | 陈超德;吴昊 |
地址: | 100015 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动态 手势 识别 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种动态手势的识别方法,其特征在于,包括:
获取当前时刻采集的屏幕前的深度图像和彩色图像;
基于所述深度图像和彩色图像确定当前时刻的静态手势的类别;并基于所述深度图像确定当前时刻的静态手势的关键点在屏幕坐标系下的第一空间位置;
基于所述第一空间位置预测下一时刻的静态手势的关键点在所述屏幕坐标系下的第二空间位置;
基于所述第一空间位置、当前时刻的静态手势的类别和所述第二空间位置确定动态手势的类别。
2.根据权利要求1所述的方法,其特征在于,所述基于所述第一空间位置、当前时刻的静态手势的类别和所述第二空间位置确定动态手势的类别,包括:
基于所述第一空间位置、当前时刻的静态手势的类别和预先建立的手势状态间的转换拓扑图,确定当前时刻的动态手势状态,其中,所述转换拓扑图包括:动态手势状态、空间位置、动态手势的类别、静态手势的类别之间关系;
基于当前时刻的动态手势状态、第二空间位置、第一空间位置和所述转换拓扑图,确定动态手势的类别。
3.根据权利要求2所述的方法,其特征在于,所述转换拓扑图包括:动态手势状态、空间位置、动态手势的类别、静态手势的类别之间关系。
4.根据权利要求1所述的方法,其特征在于,所述基于所述第一空间位置预测下一时刻的静态手势的关键点在所述屏幕坐标系下的第二空间位置,包括:
基于所述第一空间位置采用卡尔曼滤波算法预测下一时刻的静态手势的关键点在所述屏幕坐标系下的第二空间位置。
5.根据权利要求1所述的方法,其特征在于,所述基于所述深度图像和彩色图像确定当前时刻的静态手势的类别,包括:
确定所述屏幕的交互区域对应的所述深度图像中的第一点集;
基于所述彩色图像确定当前时刻的静态手势的第二点集;
基于所述第一点集和所述第二点集确定当前时刻的静态手势在所述交互区域对应的目标点集;
基于所述目标点集确定当前时刻的静态手势的类别。
6.根据权利要求5所述的方法,其特征在于,所述确定所述屏幕的交互区域对应的所述深度图像中的第一点集,包括:
确定所述深度图像中各个点在所述屏幕坐标系下的第一坐标信息;
基于所述第一坐标信息和所述交互区域在所述屏幕坐标系下的第二坐标信息确定第一点集。
7.根据权利要求5所述的方法,其特征在于,所述基于所述彩色图像确定当前时刻的静态手势的第二点集,包括:
将所述彩色图像转化至颜色空间,其中,所述颜色空间包括色调通道;
基于肤色在色调通道的取值范围从所述色调通道获取当前时刻的静态手势的第二点集。
8.根据权利要求5所述的方法,其特征在于,所述基于所述目标点集确定当前时刻的静态手势的类别,包括:
基于所述目标点集确定手部区域凸包的缺陷数及手部区域的形态学参数;
基于所述缺陷数和所述形态学参数确定当前时刻的静态手势的类别。
9.一种动态手势的识别装置,其特征在于,包括:
第一获取模块,用于获取当前时刻采集的屏幕前的深度图像和彩色图像;
第一确定模块,用于基于所述深度图像和彩色图像确定当前时刻的静态手势的类别;并基于所述深度图像确定当前时刻的静态手势的关键点在屏幕坐标系下的第一空间位置;
预测模块,用于基于所述第一空间位置预测下一时刻的静态手势的关键点在所述屏幕坐标系下的第二空间位置;
第二确定模块,用于基于所述第一空间位置、当前时刻的静态手势的类别和所述第二空间位置确定动态手势的类别。
10.一种电子设备,其特征在于,包括:
存储器和处理器,所述存储器上存储有计算机程序,该计算机程序被所述处理器执行时,执行如权利要求1至8任意一项所述动态手势的识别方法。
11.一种计算机可读存储介质,其特征在于,该计算机可读存储介质存储的计算机程序,能够被一个或多个处理器执行,能够用来实现如权利要求1至8任意一项所述动态手势的识别方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于京东方科技集团股份有限公司,未经京东方科技集团股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210773664.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种风电场智能监控装置
- 下一篇:一种冰爽亲肤的面料