[发明专利]混合现实交互

说明书

公开了涉及经由头戴式显示器与混合现实环境中的物理对象进行交互的各实施例。在一个实施例中，混合现实交互程序基于由显示器捕捉的图像标识对象。基于混合现实环境的一方面确定针对该对象的交互上下文。查询针对该物理对象的简档以确定针对该对象的交互模式。基于交互上下文编程地选择所选的交互模式。经由显示器接收定向在对象的用户输入并基于所选的交互模式将该用户输入解释成对应于虚拟动作。对与物理对象相关联的虚拟对象执行虚拟动作以修改虚拟对象的外观。随后经由显示器显示经修改的虚拟对象。

背景

使用计算设备来搜索和检索相关信息是常见的任务。用于找到并显示信息的典型计算设备可包括智能电话、平板、笔记本计算机等等。然而，这样的计算设备通常限于经由专用图形用户接口和相应的显示元素(诸如，web搜索门户、超链接等)来将用户连接到相关信息。由相应的计算设备生成的这些公知接口和显示元素被绑定到该设备，并通常采用很少的上下文或不采用上下文来将其链接到用户或用户的环境。此外，典型的计算设备在其理解在其中被使用的环境和/或将该环境内的用户活动链接到与该用户相关的信息的能力方面相当受限。

概述

本文公开了涉及用于与混合现实环境中的物理对象进行交互的系统和方法的各个实施例。例如，一个公开的实施例提供一种用于与混合现实环境中的物理对象进行交互的方法。该方法包括提供操作地连接到计算设备的头戴式显示设备，其中该头戴式显示设备包括显示系统和多个输入传感器，该显示系统用于呈现混合现实环境，而多个输入传感器包括用于捕捉物理对象的图像的相机。基于捕捉到的图像来标识物理对象，并且基于混合现实环境的一个或多个方面为标识出的物理对象确定交互上下文。

该方法包括查询物理对象的存储简档以为该物理对象确定多个交互模式。该方法包括基于交互上下文从多个交互模式中编程地选择所选的交互模式。经由头戴式显示设备的输入传感器之一来接收被定向在该物理对象处的用户输入。基于所选的交互模式将该用户输入解释成对应于虚拟动作。

该方法进一步包括对与物理对象相关联的虚拟对象执行虚拟动作以由此修改该虚拟对象的外观。该方法随后经由头戴式显示设备以经修改的外观来显示该虚拟对象。

提供该概述以便以简化形式介绍概念的选集，所述概念在以下详细描述中被进一步描述。本概述并不旨在标识所要求保护主题的关键特征或必要特征，也不旨在用于限制所要求保护主题的范围。而且，所要求保护的主题不限于解决该公开的任一部分中所注的任何或全部缺点的实现方式。

附图简述

图1是根据本公开的一实施例的混合现实交互系统的示意图。

图2示出根据本公开的一实施例的示例头戴式显示设备。

图3是根据本公开的一实施例的用户佩戴图2的头戴式显示设备并在办公室中使用混合现实交互系统的示意透视图。

图4A、4B和4C是根据本公开的一实施例的用于与混合现实环境中的物理对象进行交互的方法的流程图。

图5是计算设备的一实施例的简化示意图解。

详细描述

图1示出混合现实交互系统10的一个实施例的示意图。混合现实交互系统10包括可被存储在计算设备22的大容量存储18中的混合现实交互程序14。混合现实交互程序14可被加载到存储器28中并由计算设备22的处理器30执行以执行下文更为详细地描述的方法和过程中的一个或多个。