[发明专利]一种体感互动方法及其系统

说明书

本发明公开了一种体感互动方法及其系统，基于体感互动系统，系统包括外接摄像组件和移动终端；外接摄像组件包括两个摄像头、与摄像头连接的处理器以及与处理器连接的通信接口；移动终端通过通信接口与外接摄像组件建立连接；两个摄像头的光轴处于同一水平面；方法包括两个摄像头获取人体图像；处理器计算人体图像中各个人体图像点的深度信息，并据此得到深度图后发送给移动终端；移动终端依据深度图提取出人体图像中的人体姿态并发送至当前进行的体感游戏应用内；将人体姿态与游戏中人体进行动作融合，得到融合画面并发送至体感游戏的显示屏幕上。本发明用户不需要手持移动终端进行动作，提高了基于移动终端的体感游戏的便利性和用户体验。

技术领域

本发明涉及体感应用技术领域，特别是涉及一种体感互动方法及其系统。

背景技术

体感互动游戏是一种通过互联网运营平台进行人机互动的活动项目，用户不需要使用手柄，直接利用肢体来完成游戏即可。这类游戏需要用户通过肢体的动作进行操作，能够增加用户的体验感觉，使游戏更加逼真。

目前的体感游戏有限于专用游戏平台，部分手机体感游戏，也需要用户拿着手机，通过手机内置的动作传感器实时获取用户的动作，并将该动作与正在运行的体感游戏进行匹配，然后由CPU同步发送到显示屏幕上进行显示。

这样使得用户在进行体感游戏时，还需要手持手机，非常不方便。

因此，如何提供一种不用手持且基于移动终端的体感互动方法及其系统是本领域技术人员目前需要解决的问题。

发明内容

本发明的目的是提供一种体感互动方法及其系统，用户不需要手持移动终端进行动作，提高了基于移动终端的体感游戏的便利性和用户体验。

为解决上述技术问题，本发明提供了一种体感互动方法，基于体感互动系统，所述系统包括外接摄像组件和移动终端；所述外接摄像组件包括两个摄像头、与所述摄像头连接的处理器以及与所述处理器连接的通信接口；所述移动终端通过所述通信接口与所述外接摄像组件建立连接；两个所述摄像头的光轴处于同一水平面；所述方法包括：

两个所述摄像头获取人体图像；

所述处理器获取所述摄像头拍摄的人体图像后，计算所述人体图像中各个人体图像点的深度信息，并据此得到深度图后发送给移动终端；

所述移动终端依据所述深度图提取出所述人体图像中的人体姿态，并将提取出来的人体姿态发送至当前进行的体感游戏应用内；

在所述体感游戏应用内，将所述人体姿态与游戏中的人体进行动作融合，得到融合画面并发送至体感游戏的显示屏幕上。

优选地，所述计算所述人体图像中各个人体图像点的深度信息的过程具体为：

通过棋盘格标定方法对所述人体图像进行标定，获取相应摄像头的参数；

在一个摄像头输出的人体图像上移动一个固定大小的窗口，确定所述固定大小窗口中的像素在另一个摄像头输出的人体图像上的对应位置，从而确定两个所述摄像头输出的人体图像上像素点的位置对应关系；

依据所述位置对应关系以及视差和物体深度的对应关系式得到每个像素点的深度信息，将所述深度信息作为对应像素点的灰度值即得到深度图；所述视差和物体深度的对应关系式为：

其中，所述b为像素点的视差，z为像素点的深度信息，f为所述摄像头的焦距，X_T和X_R是像素点在左右两张所述人体图像上的成像点距离自身所处图像左边缘的距离。

优选地，所述依据所述深度图提取所述人体图像中的人体姿态的过程具体为：

依据预先构建的随机森林模型中设置的人体关节，提取所述深度图中的各个关节处的深度信息；