[发明专利]信息处理器、处理方法和程序

说明书

技术领域

本发明涉及信息处理器、处理方法和程序。本发明更具体地涉及用于使用合并了真实世界的真实对象和电子显示的混合现实(MR)技术来处理数据的信息处理器、处理方法和程序。

背景技术

例如，如果使用PC(个人计算机)的用户对数据进行处理，则他或她对PC的显示部(显示器)上的显示数据进行处理。然而，仅仅在显示部(即，有限的区域)上对数据进行处理包含了以下问题：

(1)当通过鼠标进行操作时，PC或其他设备的显示部上出现的鼠标光标停止在显示部的屏幕区域的边缘处。这使得不可能使用鼠标光标将显示部内的对象或窗口移动到显示部的屏幕区域外部的区域。

(2)如果由用户所使用的窗口或其他对象填满PC或其他设备的显示部的屏幕区域，则很多窗口被显示为彼此重叠。为了查看在下面的窗口，用户例如必须选择在下面的窗口以将其显示在顶部或者将重叠的窗口改变为图标。然而，前者的处理使得不可能查看已经移动到其他窗口后面的窗口。另一方面，后者的处理使得不可能查看图标化的窗口的细节。

存在以上问题。要注意，可以执行以下处理来使用比PC或其他设备的显示部的尺寸更大的区域。

(a)准备新的物理显示器并且将该显示器连接到由用户操作的计算机，使得可以使用多个显示器。

(b)在单个显示部上设定虚拟桌面。

然而，前者(a)不仅需要增加显示器的成本，还需要空间。另一方面，后者(b)需要用户输入命令或者操纵例如出现在托盘上的图标，以访问显示部上实际显示的区域之外的区域。

本发明意图例如通过使用基于混合现实(MR)的数据处理来解决这些问题。要注意，专利文献1(日本专利公开第2008-304268号)和专利文献2(日本专利公开第2008-304269号)是描述了混合现实的现有技术的示例。这些文献描述了适于使用通过相机捕获的图像来制作真实世界的三维映射的处理。

现有技术文献

专利文献

专利文献1：日本专利公开第2008-304268号

专利文献2：日本专利公开第2008-304269号

发明内容

技术问题

本发明的目的是提供信息处理器、信息处理方法和程序，其由于基于混合现实(MR)的数据处理，有效地使用了PC或其他设备的显示部(显示器)之外而非仅仅显示部中的空间区域来用于数据处理。

技术方案

本发明的第一方式是一种信息处理器，其包括坐标处理模块、相机、三维信息分析部、第二显示部和虚拟对象管理部。坐标处理模块确定第一显示部上显示的作为位置指示符的光标的位置位于第一显示部的区域内部还是外部，并且如果光标位于第一显示部的区域外部，则向虚拟对象管理部输出光标位置信息。相机捕获包括第一显示部的真实对象的图像。三维信息分析部分析相机捕获图像中所包括的真实对象的三维位置。第二显示部显示相机捕获图像。虚拟对象管理部生成不同于相机捕获图像中所包括的真实对象的虚拟对象，并且生成包括所生成的虚拟对象和该真实对象的合成图像，以便在第二显示部上显示该合成图像。虚拟对象管理部基于从坐标处理模块提供的光标位置信息，计算光标的三维位置，以便在第二显示部上显示其中将光标作为虚拟对象设置在所计算的位置处的合成图像。

此外，在根据本发明的信息处理器的实施例中，该信息处理器包括应用执行部，其适于处理通过位置指示符指定的指定对象。应用执行部确定指定对象位于第一显示部的区域内部还是外部，并且如果指定对象位于第一显示部的区域外部，则向虚拟对象管理部输出对象位置信息。虚拟对象管理部基于从坐标处理模块提供的对象位置信息，计算对象的三维坐标，以便在第二显示部上显示其中将对象作为虚拟对象设置在所计算的位置处的合成图像。

此外，在根据本发明的信息处理器的另一实施例中，如果基于从坐标处理模块提供的对象位置信息计算的对象的三维位置包括第一显示部的显示区域，则虚拟对象管理部在第二显示部上显示其中删除了与第一显示部的显示区域重叠的对象区域图像的合成图像。

此外，在根据本发明的信息处理器的又一实施例中，该信息处理器还包括对象信息获取部。对象信息获取部获取通过设置为虚拟对象的光标所指定的真实对象的图像数据，并且基于所获取的图像数据来检索数据以便获取对象信息。对象信息获取部向第一显示部输出所获取的对象信息作为显示数据。