[发明专利]用于创建环境并用于共享环境中基于位置的体验的系统和方法

说明书

一种用于创建环境并用于基于该环境来共享体验的系统，包括多个移动设备，该移动设备具有用在兴趣点附近来捕捉兴趣点附近的随机、众源的图像以及相关联的元数据的相机，其中，每一个图像的元数据都包括移动设备的位置和相机的取向。优选地，图像包括深度相机信息。无线网络与移动设备进行通信以接受图像和元数据，且构建并存储该区域的点云或3D模型。用户连接到此体验平台，以从用户选择的位置和取向查看3D模型，并例如，利用社交网络参与体验。

背景

1.技术领域

本发明涉及用于创建包括虚拟模型和图像的室内和户外环境的系统和方法，以及使用这样创建的环境的方法和系统。在优选形式中，部分地使用众源的图像和元数据来创建环境，且环境被应用于社交媒体应用。

2.对相关技术的描述

Microsoft、Google，以及Nokia(Navteq)已经采用移动街道汽车通过世界上的大多数主要城市来当汽车在街道上遍历时捕捉建筑物和环境的图像。在一些情况下，激光雷达成像(例如，光检测及测距或“LIDAR”)还捕捉来自汽车的测距数据，以捕捉与建筑物和街道位置和结构有关的数据，诸如建筑物高度。由行驶中的汽车捕捉到的图像包括用户可从地图服务访问的照片和视频图像(以及在很多情况下，卫星图像)。例如，从Google Maps和Google Earth访问来自Google的Street View，并提供当获取汽车沿着主要街道移动时从获取汽车获取的全景图像。来自微软的Bing Maps是类似的，参见如，美国专利公开No.2011/0173565和WO 2012/002811。Earthmine是类似的，但是，使用Mars收集系统。Nokia具有其自己的类似地操作的版本，称为“Journey View”。这样的图像非常有用，但是，获取仅限于沿着主要干道行驶的专用车辆。其他方法使用从飞机捕捉到的光学和LIDAR数据。

出现了照片共享站点，其中基于web的照片储存库(Photobucket)与被授权的用户共享事件的照片。示例包括Flickr、Photobucket、Picasa、Shutterfly、BeamrandSnapfish。进一步地，诸如Facebook和Google+之类的社交网络使用户组张贴事件的照片并与朋友共享照片。这样的照片储存库和社交网络对于与朋友共享事件是有用的，但是，在真实性和交互方面受到限制。进一步地，许多社交网络作为照片储存库来操作，传统的照片储存库已经变为社交网络——模糊它们之间的区别。进一步地，照片改进的站点变得常见。例如，Instagram、Camera+，以及Pinterest。

需要创建环境并更新环境的准确的方法和系统，以便它是准确的、特征丰富的、且当前的。例如，美国专利公开No.2011/0313779说明了通过收集用户反馈来更新兴趣点的一种方法。另外，很多环境简直不可用，诸如停车场、室内位置和主要城市中的主要街道以外的任何位置。进一步地，能够在超出只共享在事件之后张贴的事件的照片之外还共享基于位置的体验将是一个进步。

相关的专利和申请描述了对基于位置的体验的各种改进，例如：美国专利No.7,855,638和7,518,501和美国专利公开No.2011/0282799、2007/00188802012/0007885以及2008/0259096(有时被称为“相关专利”)。通过引用在法律允许的最大程度上结合此处所引用的所有参考文献，但是，这样的结合不应该解释为参考文献现有技术的承认。

发明内容

通过根据本发明的用于创建并共享环境和体验的系统和方法来解决上文所概述的问题。广泛地说，用于创建环境并用于共享体验的系统包括多个移动设备，它们具有用在兴趣点附近来捕捉所述兴趣点附近的随机图像和相关联的元数据的相机，其中，每一个图像的元数据都包括移动设备的位置和相机的取向。无线网络与移动设备进行通信以接受图像和元数据。图像处理服务器连接到网络，用于接收图像和元数据，其中服务器处理图像以确定图像中的各种目标的位置，并构建兴趣点附近的区域的3D模型。优选地，体验平台连接到图像处理服务器，以便存储3D模型。多个用户连接到体验平台，以从用户选择的位置和取向来查看兴趣点。