[发明专利]桌面与虚拟世界之间的鼠标共享

摘要

一种混合现实头戴式显示器(HMD)设备，支持三维(3D)虚拟世界应用，通过该三维虚拟世界应用可以与在耦合至个人计算机(PC)的监视器上显示的现实世界桌面交互并且共享鼠标输入。在PC上执行的鼠标输入服务器追踪在监视器上显示的桌面上的鼠标移动。当鼠标的移动超过监视器屏幕边缘时，鼠标输入服务器取得鼠标的控制并且阻止鼠标消息通过PC系统的传播。鼠标输入服务器通过网络连接与由应用暴露的鼠标输入客户端通信以向该客户端通知鼠标已经转换到在虚拟世界中操作，并且传递描述鼠标移动和控制操作(诸如按钮按压)的鼠标消息。

主权项

一种物理环境中的用户可操作的头戴式显示器(HMD)设备，包括：一个或多个处理器；透视显示器，所述透视显示器被配置成用于向用户呈现混合现实环境，用户对所呈现的混合现实环境的查看位置至少部分地取决于用户头部在物理环境中的姿态而可变；以及存储计算机可读指令的一个或多个存储器设备，所述计算机可读指令在被所述一个或多个处理器执行时执行一种方法，所述方法包括以下步骤：在HMD设备的视野内呈现混合现实环境，所述混合现实环境包括虚拟世界中支持的对象以及现实世界中支持的对象，通过网络连接从在远程计算设备上运行的鼠标输入服务器接收鼠标消息，所述鼠标消息描述操作地连接到所述计算设备的鼠标的移动，所述鼠标控制能够在虚拟世界以及在现实世界中的监视器上显示的光标，当所述鼠标的移动导致所述光标移动超过所述监视器边界时，计算所述光标在虚拟世界中的初始位置，使用所述鼠标消息来计算所述光标在虚拟世界中的后续位置，以及使用计算所得的初始和后续位置在虚拟世界中呈现所述光标。