[发明专利]一种用于带有步进天车娃娃机的随动方式手势控制方法及系统

说明书

本发明提出一种用于带有步进天车娃娃机的随动方式手势控制方法及系统，所述方法包括如下步骤：步骤1、利用摄像头采集用户手势操作图像信息，通过CNN卷积神经网络模型对采集到的用户手势操作图像信息进行手势识别，从而得到手势坐标；步骤2、将手势坐标转换成步进天车空间坐标，更新当前手势状态；步骤3、与娃娃机系统进行通信，获取娃娃机状态以及通知娃娃机当前手势状态，从而完成娃娃机的控制操作；所述方法降低了玩家游戏操作难度并增加了手势控制娃娃机产品多样性。

技术领域

本发明属于手势识别控制技术领域，特别是涉及一种用于带有步进天车娃娃机的随动方式手势控制方法及系统。

背景技术

手势控制娃娃机技术多种多样，大部分技术基于深度摄像头进行开发，此技术比较成熟，但成本过高导致市场推广效果欠佳，部分手势控制基于单目摄像头开发，成本低，检测效果精准，但无论哪种技术手势控制娃娃机的控制方式都是基于原有机械摇杆方式进行控制，手势在空间中模拟机械摇杆来完成天车前后左右动作，这种操作方式部分玩家初次上手需要适应，初次体验时，体验效果欠佳。

现有娃娃机手势控制模块的控制方式是摇杆式手势控制方式，具有以下缺点：(1)整体操作流程具有一定复杂度；(2)需要寻找空间控制区域中心位置，即停止位置，否则无法确定前、后、左、右操作区域；(3)天车近距离位移，新手玩家不易操作，例如，“手势向左”然后切换“手势中间”两个步骤才能完成天车微调，对手势平移的速度和位置具有一定的要求。

发明内容

本发明目的是为了解决现有技术中的问题，提出了一种用于带有步进天车娃娃机的随动方式手势控制方法及系统。

本发明是通过以下技术方案实现的，本发明提出一种用于带有步进天车娃娃机的随动方式手势控制方法，所述步进天车能够按照坐标位置进行移动，所述方法包括如下步骤：

步骤1、利用摄像头采集用户手势操作图像信息，通过CNN卷积神经网络模型对采集到的用户手势操作图像信息进行手势识别，从而得到手势坐标；

步骤2、将手势坐标转换成步进天车空间坐标，更新当前手势状态；

步骤3、与娃娃机系统进行通信，获取娃娃机状态以及通知娃娃机当前手势状态，从而完成娃娃机的控制操作；

所述步骤2具体为：

步骤2.1：判断手势类型是否有效，有效则进行步骤2.2，无效则执行步骤2.4；

步骤2.2：判断手势坐标是否落在图像操作区，图像4个边缘向内偏移一定距离后形成的矩形区域定义为图像操作区，如果落在图像操作区则执行步骤2.3，否则执行步骤2.4；

步骤2.3：将图像手势坐标转换成步进天车空间坐标：手势中心定义为图像手势坐标，计算手势中心横轴与纵轴所在图像操作区的相对位置，从而得到手势在图像操作区内的相对坐标，即步进天车空间坐标；

步骤2.4：更新当前手势状态；

步骤2.5：完成。

进一步地，所述有效的手势类型包括手掌张开、手掌闭合和握拳手势。

进一步地，所述步骤1具体为：

步骤1.1：单目摄像头采集图像；

步骤1.2：CNN卷积神经网络识别图像；

步骤1.3：识别结果是手掌张开，手势坐标有效，保存手势坐标并处理坐标防抖，进入步骤1.6；识别结果是手掌闭合，手势坐标有效，保存手势坐标并处理坐标防抖，进入步骤1.6；识别结果是握拳手势，则进入步骤1.4；

步骤1.4：判断握拳手势有效性，依据当前握拳手势坐标是否在上次识别到的手掌内部，如果在内部则握拳手势有效进入到步骤1.6，否则握拳手势无效进入步骤1.5；