[发明专利]一种手机与其他显示设备的交互方法及装置

权利要求书

1.一种手机与其他显示设备的交互方法，包括如下步骤：

S100：通过手机中的深度相机获取人体的深度图；

S200：利用所述人体的深度图对人体的骨骼进行定位和追踪；

S300：从所述人体的骨骼中选取人体的手部的关节点进行追踪，将手部的关节点运动的轨迹转化为手机的控制指令来控制手机；

S400：手机将所述控制指令传递到与其通信的其他显示设备，实现了手机对其他显示设备的控制。

2.根据权利要求1所述的方法，优选的，步骤S100进一步包括：

S101：打开手机，让手机处于正常的工作状态；

S102：人站在离手机30-200cm的位置，手机中的深度相机中包含的红外散斑编码投射器向人体投射出红外散斑编码图案，同时手机中的深度相机包含的红外接收摄像头开始接收人体反射后的红外散斑编码图案；

S103：将接收到的红外散斑编码图案送给手机芯片进行图像的预处理，图像增强，块匹配深度计算步骤后得到人体的深度图。

3.根据权利要求1所述的方法，步骤S200进一步包括：

S201：利用所述人体的深度图，根据深度学习的方法对人体的关节点的特征值进行提取；

S202：将提取到的关节点的特征值进行训练，根据训练后得到的特征值对人体的骨骼进行精确的定位与追踪。

4.根据权利要求1所述的方法，步骤S200中的人体的关节点大约是28个，主要包括大脑关节点，双肩关节点，手关节关节点，脚关节关节点。

5.根据权利要求1所述的方法，步骤S300中的将手部的关节点运动的轨迹转化为手机的控制指令具体为：

将手部的关节点从上往下运动的轨迹转化为手机的从上往下翻页指令；和/或，

将手部的关节点从上往下运动的轨迹转化为手机的滚动滑条指令；和/或，

将手部的关节点从左往右运动的轨迹转化为手机的确定指令；和/或，

将手部的关节点从右往左运动的轨迹转化为手机的取消指令。

6.根据权利要求1所述的方法，其中，步骤S400中的所述通信具体为交换机或I/O接口。

7.根据权利要求1所述的方法，其中，所述其他显示设备是液晶的电视屏幕或教学使用的ppt其他显示设备，当所述其他显示设备是液晶的电视屏幕时，手机就相当于一个远程遥控器；当所述其他显示设备是教学使用的ppt其他显示设备时，手机就相当于一个播放器。

8.一种手机与其他显示设备的交互装置，包括：

三维深度感知单元：用于通过手机中的深度相机获取人体的深度图；

人体骨骼追踪单元：利用所述人体的深度图对人体的骨骼进行定位和追踪；

人体手势识别单元：从所述人体的骨骼中选取人体的手部的关节点进行追踪，将手部的关节点运动的轨迹转化为手机的控制指令来控制手机；

其他显示设备显示单元：手机将所述控制指令传递到与其通信的其他显示设备，实现了手机对其他显示设备的控制。

9.根据权利要求8所述的装置，三维深度感知单元进一步包括：

手机初始化单元：打开手机，让手机处于正常的工作状态；

红外散斑编码图案获取单元：人站在离手机30-200cm的位置，手机中的深度相机中包含的红外散斑编码投射器向人体投射出红外散斑编码图案，同时手机中的深度相机包含的红外接收摄像头开始接收人体反射后的红外散斑编码图案；

人体的深度图获取单元：将接收到的红外散斑编码图案送给手机芯片进行图像的预处理，图像增强，块匹配深度计算步骤后得到人体的深度图。

10.根据权利要求8所述的装置，人体骨骼追踪单元进一步包括：

特征值提取单元：利用所述人体的深度图，根据深度学习的方法对人体的关节点的特征值进行提取；

特征值训练单元：将提取到的关节点的特征值进行训练，根据训练后得到的特征值对人体的骨骼进行精确的定位与追踪。