[发明专利]启用云的增强现实

说明书

一种增强现实系统在客户端设备上生成计算机介导的现实。客户端设备具有传感器，其包括被配置为捕获环境的图像数据的相机和用于捕获描述客户端设备的定位的位置数据的位置传感器。客户端设备利用图像数据和位置数据创建三维(3D)地图，以用于生成虚拟对象来增强现实。客户端设备将所创建的3D地图传输到外部服务器，该外部服务器可以利用3D地图来更新被存储在外部服务器上的世界地图。外部服务器将世界地图的本地部分发送到客户端设备。客户端设备确定客户端设备与映射点之间的距离，以在映射点处生成要在客户端设备上显示的计算机介导的现实图像。

相关申请的交叉引用

本申请要求于2017年7月7日提交的美国临时申请No.62/529,492和于2018年7月6日提交的美国非临时申请No.16/029,530的权益，这两个申请均通过引用整体并入本文。

技术领域

本公开总体上涉及计算机介导的现实系统，并且更具体地涉及从由客户端设备收集的数据生成3D地图的增强现实(AR)系统。

背景技术

计算机介导的现实技术允许具有手持式设备或可穿戴设备的用户添加、减去或以其他方式改变其对通过该设备查看的其环境的视觉或听觉感知。增强现实(AR)是一种类型的计算机介导的现实，它使用在计算设备处生成的感官输入来专门改变对物理真实世界环境的实时感知。

发明内容

根据特定实施例，一种方法生成计算机介导的现实数据。该方法包括在客户端设备处生成三维(3D)地图数据和相机位置数据。该方法还包括：向外部服务器传输3D地图数据和客户端数据；在客户端设备处从外部服务器接收世界地图数据；以及在客户端设备处生成计算机介导的现实图像。世界地图数据可以使用3D地图数据而被生成。

根据另一特定实施例，一种在便携式计算机上执行的增强现实引擎，其包括本地存储的动画引擎。动画引擎包括第一输入，其接收由集成在便携式计算机中的相机产生的数字图像流。数字图像可以表示由相机看到的环境的近实时视图。动画引擎还包括：第二输入，其从被集成在便携式计算机中的地理位置定位系统接收定位(geolocation)位置的；3D映射引擎，其接收第一输入和第二输入并且估计相机在特定时间点的位置与一个或多个映射点之间的距离；以及输出，其包括覆盖有计算机生成的图像的由相机产生的数字图像流。计算机生成的图像可以位于3D地图中的特定位置，并且随着用户将相机移动到空间中的不同位置而保持定位在该特定位置。与本地存储的动画引擎进行网络通信的非本地存储的对象检测引擎可以用于检测3D地图中的对象，并且将检测到的对象的指示(例如，位置和标识，诸如类型)返回给便携式计算机。对象检测引擎可以使用从本地存储的动画引擎接收的第一输入以及从本地存储的动画引擎接收的第二输入，第一输入包括来自由相机产生的数字图像流的数字图像，第二输入包括与从本地存储的动画引擎接收的数字图像相关联的地理位置。

下面描述本公开的其他特征和优点。

附图说明

图1示出了根据一个实施例的用于生成和显示增强现实数据的联网计算环境。

图2是示出根据一个实施例的由图1的计算系统可执行以生成和显示增强现实数据的过程的流程图。

具体实施方式

一种系统和方法创建三维(3D)地图(例如，分辨率在厘米量级)，并且然后使用该3D地图来支持与真实世界的交互。在各种实施例中，该映射是在客户端侧(例如，电话或头戴式耳机)完成的，并且与后端服务器配对，该后端服务器提供先前编译的图像并且将其映射回到客户端设备。