[发明专利]具有关联到用户操纵的虚拟对象的空间化音频的增强现实系统

权利要求书

1.一种增强现实系统，包括：

手持控制器；

可穿戴头带单元，包括：

左眼显示器，其用于显示虚拟对象的左眼图像，所述左眼显示器包括左侧透光目镜，通过所述左侧透光目镜，真实世界环境是可见的；

右眼显示器，其用于显示所述虚拟对象的右眼图像，所述右眼显示器包括右侧透光目镜，通过所述右侧透光目镜，所述真实世界环境是可见的；

左侧扬声器；以及

右侧扬声器；

第一跟踪组件，其被配置为至少跟踪所述手持控制器相对于所述可穿戴头带单元的位置；

耦接到所述左眼显示器、所述右眼显示器、所述左侧扬声器、所述右侧扬声器和所述第一跟踪组件的电路，其中所述电路被配置为：

接收至少指示所述手持控制器相对于所述可穿戴头带单元的所述位置的信号；

输出信号到所述左眼显示器和所述右眼显示器，以在相对于所述手持控制器基本固定的位置显示虚拟对象；

输出空间化音频，所述空间化音频包括输出到所述左扬声器的左声道音频信号和输出到所述右扬声器的右扬声器音频信号，其中所述空间化音频具有相对于所述手持控制器基本固定的至少一个虚拟声源位置。

2.根据权利要求1所述的增强现实系统，其中：

在输出具有相对于所述手持控制器基本固定的至少一个虚拟声源位置的空间化音频时，所述电路被配置为输出具有基本上固定到由所述虚拟对象占据的位置的至少一个虚拟声源位置的空间化音频。

3.根据权利要求2所述的增强现实系统，其中，由所述虚拟对象占据的所述位置从所述手持控制器移位。

4.根据权利要求1所述的增强现实系统，其中，所述跟踪组件还被配置为跟踪所述手持控制器相对于可穿戴头带单元的取向，并且其中所述电路被配置为接收指示所述手持控制器相对于所述可穿戴头带的所述取向的信号。

5.根据权利要求4所述的增强现实系统，其中，由所述虚拟对象占据的所述位置从所述手持控制器移位。

6.根据权利要求1所述的增强现实系统，其中，所述电路被配置为通过使用至少一个头部相关传递函数处理单音频信号来生成所述左侧音频信号和所述右侧音频信号。

7.根据权利要求1所述的增强现实系统，还包括：

第二跟踪组件，其被配置为跟踪所述可穿戴头带单元相对于所述真实世界的位置和取向；以及

其中所述电路耦接到所述第二跟踪组件，并且其中所述电路还被配置为接收指示所述可穿戴头带单元相对于所述真实世界的所述位置和取向的信号。

8.一种增强现实系统，包括：

可穿戴头带单元，包括：

左眼显示器，其用于显示虚拟对象的左眼图像，所述左眼显示器包括左侧透光目镜，通过所述左侧透光目镜，真实世界环境是可见的；

右眼显示器，其用于显示所述虚拟对象的右眼图像，所述右眼显示器包括右侧透光目镜，通过所述右侧透光目镜，所述真实世界环境是可见的；

左侧扬声器；以及

右侧扬声器；

手部跟踪机器视觉子系统，其被配置为至少跟踪用户的手部的位置；

耦接到所述左眼显示器、所述右眼显示器、所述左侧扬声器、所述右侧扬声器和所述手部跟踪机器视觉子系统的电路，其中所述电路被配置为：

从所述手部跟踪机器视觉子系统接收至少指示所述用户的手部相对于所述可穿戴头带单元的所述位置的信号；

输出信号到所述左眼显示器和所述右眼显示器，以在至少暂时耦接到所述用户的手部的位置显示虚拟对象；

输出空间化音频，所述空间化音频包括输出到所述左扬声器的左声道音频信号和输出到所述右扬声器的右扬声器音频信号，其中所述空间化音频具有相对于所述用户的手部基本固定的至少一个虚拟声源位置。

9.根据权利要求8所述的增强现实系统，其中，所述手部跟踪机器视觉系统还被配置为跟踪所述用户的手部的姿势并且响应于所述用户的手部的所述姿势的改变来调整所述虚拟对象的至少一个运动学参数。