[发明专利]现实世界空间的虚拟现实呈现

权利要求书

1.一种用于经由头戴式显示器(HMD)向远程用户输送现实世界空间的虚拟现实(VR)呈现的方法，其包括：

发送对所述现实世界空间的所述VR呈现的请求；

识别由所述用户做出的在所述现实世界空间内的座位选择，所述座位选择被映射到所述现实世界空间中的现实世界捕获系统，所述现实世界捕获系统被配置成在对应于所述座位选择的位置处捕获视频和音频；

接收所述现实世界捕获系统的映射数据，所述映射数据包括所述现实世界捕获系统的现实世界坐标；

访问具有所述用户的用户偏好的用户配置文件；

从所述现实世界捕获系统接收所述现实世界空间的视频流，所述视频流包括由所述现实世界捕获系统的一个或多个摄像机捕获的多个视频图像，在所述HMD中从与对应于所述座位选择的所述现实世界捕获系统的所述现实世界坐标相关联的视角呈现所述多个图像；

从所述视频流的所述多个图像中识别被配置成在向所述用户呈现期间进行重塑的现实世界对象；

基于所述用户配置文件来重塑所述多个视频图像内的所述现实世界对象，所述重塑包括用图形内容元素进行覆盖来取代与所述现实世界对象相关联的图像数据，所述覆盖基于与对应于所述座位选择的所述现实世界捕获系统相关联的所述视角在几何上进行调整；以及

经由所述HMD向所述用户呈现所述视频流以进行所述VR呈现。

2.如权利要求1所述的方法，其还包括：

在所述用户佩戴着所述HMD时从多个传感器跟踪所述HMD的位置和取向；以及

在所述用户佩戴着所述HMD时基于所述跟踪所述HMD的所述位置和所述取向来检测所述HMD的移动，其中，响应于所述HMD的所述移动而使所述视频流的视野改变。

3.如权利要求1所述的方法，其中，由所述现实世界捕获系统提供的所述视频流包括360度水平视野。

4.如权利要求1所述的方法，其中，所述映射数据还包括所述现实世界对象的坐标，所述现实世界对象的所述坐标能够用于所述重塑所述现实世界对象。

5.如权利要求1所述的方法，其中，所述用户偏好包括所述用户的人口统计资料、所述用户的浏览历史、所述用户的购物历史、所述用户的观看历史、所述用户的社交媒体数据或用户兴趣，所述用户偏好能够用于确定用于所述重塑的所述图形内容元素。

6.如权利要求1所述的方法，其中，所述覆盖包括测量所述现实世界捕获系统与所述现实世界对象的顶点之间的现实世界距离，以及测量从所述现实世界捕获系统追溯到所述顶点的射线之间所形成的角度，其中，使用所测得的距离和所测得的角度基于所述现实世界捕获系统的所述视角在几何上调整用图形内容项目进行覆盖。

7.如权利要求6所述的方法，其中，所述现实世界对象移动，并且其中，所述测量所述现实世界距离以及所述测量所述角度随着所述现实世界对象的移动而实时地或接近实时地进行，使得在现实世界对象移动时基于所述现实世界对象的改变的视角在几何上调整所述图形内容项目。

8.如权利要求1所述的方法，其中，所述重塑包括识别所述多个视频图像内的所述现实世界对象的顶点以及变换所述图形内容元素，使得图形内容项目的顶点与所述现实世界对象的所述顶点配合，使用已经变换的所述图形内容元素用于所述用所述图形内容元素进行覆盖来取代与所述现实世界对象相关联的所述图像数据。

9.如权利要求1所述的方法，其还包括：

从所述现实世界捕获系统接收所述现实世界空间的音频馈送，所述音频馈送是根据与座位位置相关联的所述现实世界捕获系统的现实世界坐标来处理。

10.如权利要求1所述的方法，其还包括：

接收所述用户对视频模块的选择，所述视频模块是所述现实世界空间的额外视频流，其中，在所述经由所述HMD向所述用户呈现所述视频流期间将所述视频模块显示为画中画显示。