[发明专利]信息处理装置、信息处理方法和程序

说明书

技术领域

本发明涉及信息处理装置、信息处理方法和程序。更具体地，本发明涉及用于利用使真实世界中的真实物体与电子图像组合的混合现实(MR)来执行数据处理的信息处理装置、信息处理方法和程序。

背景技术

例如，当用户使用个人计算机(PC)执行数据处理时，用户对PC的显示器上显示的数据执行处理。作为示例，这里描述了复制或剪切数据的情况。在该情况下，用户指定显示器上显示的字符串或图像区域等，随后输入执行针对另一区域的数据剪切或数据复制的命令。

以这种方式已被剪切或复制的处理数据被存储在PC中的存储器中，但是在处理期间可能从显示区域消失。为了使用户确认已被剪切或复制的处理数据的内容，需要执行如下一个处理，例如：

(a)总是在显示器的部分区域上显示处理数据；

(b)将处理数据存储在复制缓冲区中，并且响应于用户操作，取回复制缓冲区中存储的数据以显示在显示器上；或者

(c)响应于用户操作，将处理数据粘贴到显示器的指定区域以显示。

例如，通过执行一个以上处理，可以确认已被剪切或复制的处理数据的内容。

然而，在以上处理中，处理(a)需要总是在显示器上显示处理数据，这占用显示器的至少部分区域。这可能引起减少用户在显示器上使用的例如文档创建屏幕区域的主要工作区域的问题。处理(b)需要用于显示复制缓冲区中存储的数据的用户操作，引起了增加用户的处理负担的问题。处理(c)也需要用户操作并且当处理数据被错误粘贴时具有需要诸如删除或撤销的额外处理的问题。

本发明旨在通过使用利用例如混合现实(MR)的数据处理来解决以上问题。对于关于混合现实的现有技术，参见例如专利文献1(JP-A-2008-304268)和专利文献2(JP-A-2008-304269)。这些文献描述了利用相机拍摄图像创建真实世界的三维(3D)地图的处理。

现有技术文献

专利文献

专利文献1：JP-A-2008-304268

专利文献2：JP-A-2008-304269

发明内容

本发明要解决的问题

本发明的目的在于提供如下的信息处理装置、信息处理方法和程序，它们通过利用混合现实(MR)的数据处理，通过例如创建其中各种数据被电子粘贴到PC等的显示器以外的区域的组合图像并且使得该组合图像是可观察的，允许有效地使用用于主要工作区域的显示器以外的空间区域。

解决问题的手段

根据本发明的第一方面提供了一种信息处理装置，包括：

存储器，用于存储在使用第一显示器的数据处理中生成的处理数据；

3D信息分析器，用于分析相机拍摄图像中包括的真实物体的3D位置；以及

虚拟物体管理器，用于接收从3D信息分析器输入的分析信息，将真实物体的构成部分确定为虚拟物体显示位置并且在第二显示器上显示其中真实物体和虚拟物体组合的组合图像，

其中该虚拟物体管理器，

响应于关于第二显示器上显示的虚拟物体的处理请求输入，将与经受处理请求的虚拟物体对应的数据输出到执行使用第一显示器的数据处理的数据处理器或者该数据处理器可访问的存储器。

此外，在本发明的信息处理装置的一个实施例中，信息处理装置包括通信部并且执行与执行使用第一显示器的数据处理的数据处理器的通信以传送或接收关于使用第一显示器的数据处理的数据。

此外，在本发明的信息处理装置的一个实施例中，3D信息分析器包括手识别模块，该手识别模块识别相机拍摄图像中包括的用户的手的每个手指并且分析由手识别模块识别的用户的手的每个手指的3D位置，并且虚拟物体管理器将用户的手的每个手指的位置确定为虚拟物体显示位置并且在第二显示器上显示其中虚拟物体与用户的手的每个手指的位置组合的组合图像。

此外，在本发明的信息处理装置的一个实施例中，存储器中存储的数据是使用第一显示器的数据处理中的已被剪切或复制的数据。

此外，在本发明的信息处理装置的一个实施例中，虚拟物体管理器接收从3D信息分析器输入的分析信息，将第二显示器上显示的图像中包括的真实物体的构成部分确定为虚拟物体显示位置并且将确定信息登记在虚拟物体信息管理表格中。

此外，在本发明的信息处理装置的一个实施例中，虚拟物体管理器登记关于虚拟物体是否被显示在第二显示器上的与虚拟物体信息管理表格中登记的虚拟物体显示位置对应的显示位置的状态信息。