[发明专利]用于创建表面显示并与其交互的系统和方法

权利要求书

1.一种方法，包括：

将图像投影到表面上；

获得正与在所述表面上的所述投影图像交互的用户的深度数据；

处理所述用户与所述投影图像的交互；

基于处理所述用户与所述投影图像的交互的结果导致要被显示给所述用户的反馈。

2.如权利要求1的方法，其中导致要被显示给所述用户的反馈包括将更新的图像投影到所述表面上。

3.如权利要求1的方法，其中所述反馈被显示在电子屏幕上。

4.如权利要求1的方法，其中所述用户与所述投影图像的交互包括使用手势来指示在所述投影图像中的一个或多个对象的选择或移动，所述方法还包括使用所获得的深度数据跟踪所述用户的手势，其中所述处理是基于跟踪的手势。

5.如权利要求1的方法，其中所述用户与所述投影图像的交互包括触摸在所述投影图像上的一个或多个位置以选择或移动在所述投影图像中的一个或多个对象。

6.如权利要求1的方法，还包括：

使用相机捕获第一区域的初始深度图像；

在所述第一区域内自动地检测用于将所述图像投影到其上的所述表面，其中所述表面满足一个或多个条件。

7.如权利要求6的方法，还包括：

当没有表面满足所述一个或多个条件时向所述用户提供在所述第一区域内没有表面满足所述一个或多个条件的信息；

请求所述用户改变所述相机的位置以允许捕获第二区域的第二深度图像用于检测用于将所述图像投影到其上的适当表面。

8.如权利要求1的方法，还包括：

获得指示用于将所述图像投影到其上的表面的所述用户的初始深度图像。

9.如权利要求1的方法，其中所述表面是在所述用户身体的部分上。

10.如权利要求1的方法，还包括：

计算表面模型和背景模型，其中所述表面模型是对应于所述表面的第一组数据，并且还有其中所述背景模型是对应于图像背景的第二组数据，其中周期性地更新所述表面模型和所述背景模型。

11.如权利要求10的方法，其中针对每个所捕获的深度数据帧来更新所述表面模型和所述背景模型。

12.如权利要求10的方法，还包括：

从所述表面模型和所述背景模型计算前景模型，其中所述前景模型是包括在深度图像的前景中的对象的第三组数据，其中所述投影图像不包括将被投影到在所述前景中的对象上的部分。

13.一种系统，包括：

深度相机，其被配置成捕获深度图像；

投影仪，其被配置成将生成图像投影到成像表面上；

处理模块，其被配置成：

　　从所捕获的深度图像跟踪用户移动，其中所述用户的移动与所投影的生成图像交互以选择或移动在所述所投影的生成图像中的一个或多个对象；基于所述用户移动与所述所投影的生成图像的交互向所述用户提供反馈；

　　基于所述用户移动与所述所投影的生成图像的交互向所述用户提供反馈。

14.如权利要求13的系统，其中经由所述所投影的生成图像提供所述反馈。

15.如权利要求13的系统，其中经由电子屏幕提供所述反馈。

16.如权利要求13的系统，其中所述处理模块还被配置成在第一深度图像中自动地检测用于将所述生成图像投影到其上的所述成像表面。

17.如权利要求16的系统，其中所述处理模块还被配置成：

确定所述成像表面是否满足一个或多个条件；

请求所述用户改变所述深度相机的位置以获得第二深度图像用于检测用于将所述生成图像投影到其上的适当成像表面。

18.如权利要求13的系统，其中所述深度相机捕获用户深度图像，并且还有其中所述处理模块还被配置成将由所述用户在所述用户深度图像中指示的指定表面识别为所述成像表面。

19.如权利要求13的系统，其中所述处理模块还被配置成：

计算表面模型和背景模型，其中所述表面模型是对应于所述成像表面的第一组数据，并且还有其中所述背景模型是对应于图像背景的第二组数据，

其中周期性地更新所述表面模型和所述背景模型。

20.一种系统，包括：

用于将图形投影到表面上的装置；

用于获得正与被投影在所述表面上的图形交互的用户的深度图像的装置；

用于处理所述用户与所述投影图形的交互的装置；

用于基于处理所述用户与所述投影图形的交互的结果向所述用户显示反馈的装置。