[发明专利]3D体感交互适配方法、系统、终端设备和可读存储介质

说明书

本发明属于人机交互技术领域，尤其涉及一种3D体感交互适配方法、装置、终端设备和计算机可读存储介质，所述方法包括：检测运行的应用程序，获取所述应用程序的身份信息；根据所述身份信息获取对应的配置信息集，所述配置信息集包括与所述应用程序的每个用户界面分别对应的配置信息，每个所述配置信息包括用户姿势和/或手势与操作指令的映射关系；识别指令检测区中用户姿势和/或手势；通过查找与所述应用程序当前运行的用户界面对应的配置信息，确定与所述用户姿势和/或手势对应的操作指令；发送所述操作指令至终端设备，以使所述终端设备响应所述操作指令。本发明实现体感交互适配成本低且周期短。

技术领域

本发明涉及人机交互技术领域，尤其涉及一种3D体感交互适配方法、系统、终端设备和可读存储介质。

背景技术

微软KINECT深度相机给人们提供了利用身体与设备进行交互的可能，比如将KINECT与游戏机、电视等设备结合，可以进行体感交互、手势控制等沉浸式操控功能，由此基于深度相机的3D人机交互方式也被认为是继按键交互、触摸交互之后的更自然的人机交互方式。

早期的交互设备，其交互互动的方式各有不同，如PC使用的是鼠标、键盘，手机最早使用的是手机键盘，后来升级为触摸屏触控，电视是用遥控器实现人机交互。而3D体感技术是基于人的姿势动作进行操控的交互方式，要想实现3D体感交互必须使上述交互设备具有专用的体感应用程序才行，比如体感游戏等，若这些交互设备没有体感应用程序，比如只有自带的游戏程序等，则无法进行体感交互。

目前使不同设备之间的程序内容转换成体感交互内容的方法是修改内容源代码，这将涉及到大量商务及研发成本，而且周期长。另外，体感指令映射单一化也是需要解决的技术问题，因此，目前关于3D体感技术开发的内容比较匮乏，用户需要更多更好的体感交互体验。

发明内容

本发明实施例提供一种3D体感交互适配方法、系统、终端和可读存储介质，解决现有技术中非体感交互设备实现体感交互成本高，周期长的技术问题。

本发明实施例第一方面提供一种3D体感交互适配方法，包括：

检测运行的应用程序，获取所述应用程序的身份信息；

根据所述身份信息获取对应的配置信息集，所述配置信息集包括与所述应用程序的每个用户界面分别对应的配置信息，每个所述配置信息包括用户姿势和/或手势与操作指令的映射关系；

识别指令检测区中用户姿势和/或手势；

通过查找与所述应用程序当前运行的用户界面对应的配置信息，确定与所述用户姿势和/或手势对应的操作指令；

发送所述操作指令至终端设备，以使所述终端设备响应所述操作指令。

在一个实施例中，所述操作指令包括键盘、鼠标、触屏、遥控操作指令中的至少一种。

在一个实施例中，所述识别指令检测区中用户的姿势和/或手势，包括：

通过捕捉设备至少获取指令检测区中用户的深度图像，并基于所述深度图像识别所述用户姿势和/或手势。

在一个实施例中，所述映射关系包括空鼠映射方式、直接操作映射方式中的至少一种。

在一个实施例中，通过设定所述用户姿势和/或手势的判定阈值和触发间隔时间进行识别指令检测区中用户有效的姿势和/或手势。

本发明实施例第二方面提供一种3D体感交互适配系统，包括：

第一获取模块，用于检测运行的应用程序，获取所述应用程序的身份信息；

第二获取模块，用于根据所述身份信息获取对应的配置信息集，所述配置信息集包括与所述应用程序的每个用户界面分别对应的配置信息，每个所述配置信息包括用户姿势和/或手势与操作指令的映射关系；