[发明专利]信息处理设备和信息处理方法、显示设备和显示方法与信息处理系统

说明书

本发明的目标在于期望地呈现虚拟物体与真实空间之间的交互。响应于用户观看或者标定真实物体(151)，与真实物体(151)对应的虚拟物体(150)出现。真实物体(151)包括输出装置，该输出装置用于产生诸如振动、电脉冲、加热或冷却、风、声音、光、移动或跳跃的输出，以及对虚拟物体(150)相对于真实物体(151)进行的动作进行反应。如果虚拟物体(150)与真实物体(151)之间的交互很好地同步进行，则可以传递出更加真实的印象。

技术领域

本说明书中公开的技术涉及一种用于在增强现实图像中执行关于与真实图像相结合的虚拟图像的处理的信息处理设备和信息处理方法、一种显示设备和显示方法、以及一种信息处理系统。具体地，该技术涉及一种用于呈现虚拟物体与真实空间之间的交互的信息处理设备和信息处理方法、一种显示设备和显示方法、以及一种信息处理系统。

背景技术

现在，在信息处理中的记述领域中，虚拟生物广泛地用作2D或3D游戏中的人物、玩家(用户)的化身或计算机的用户界面。在信息处理设备中生成这种类型的虚拟生物的移动，使得虚拟生物在屏幕上自由移动或者发出声音。

另外，最近，用于在真实图像重叠虚拟图像的技术(如，增强现实(AR)和混合现实)正在传播。要在虚拟图像上重叠的虚拟图像可以是虚拟生物的图像，例如，游戏中的人物、玩家(用户)的化身、虚拟宠物或计算机的用户界面、或虚拟移动物体，例如，汽车。

例如，提出了一种娱乐装置，显示与真实环境的图像相结合的虚拟宠物。虚拟宠物可以与用户交谈并且在虚拟屏幕上四处走动(例如，参见专利文献1)。在这个娱乐装置中，由系统单元生成的虚拟宠物被呈现(rendered)在通过摄影机捕捉的真实图像中，并且在显示/声音输出设备上显示，例如，装有显示器和扬声器的监控器或电视机。然而，虚拟宠物仅仅在屏幕中移动，并且表现虚拟宠物的动作或反应的声音等仅仅从显示/声音输出设备的安装地点中输出。因此，存在对虚拟宠物与真实空间之间的交互的现实表现的限制。

还提出了一种物体显示设备。在这个物体显示设备中，将在DFD(深度融合显示)型的三维显示设备上显示的三维图像的深度位置调整为真实物体穿过的深度位置，以便给出虚拟物体三维地存在于与观看者相同的空间内的感觉，并且观看者彼此交互(例如，见专利文献2)。然而，这个物体显示设备仅仅可以提供视觉交互效果。而且，这种交互效果仅仅在显示虚拟物体的物体显示设备的安装地点内有效。

还提出了一种图像处理方法，用于在真实空间上叠加包括虚拟物体的虚拟空间的视频图像，并且通过头戴式显示器呈现视频图像(例如，见专利文献3)。根据这个图像处理方法，扬声器输出声音效果，例如，虚拟物体在虚拟空间内四处移动的声音。然而，这种声音效果表现虚拟物体在虚拟空间内的交互，并且不表现虚拟物体与真实空间的交互。

还提出了一种信息终端装置，其显示虚拟宠物的图像，使得虚拟宠物看起来如同在实际视场中的人体皮肤上的虚拟图像(例如，见专利文献4)。在虚拟宠物与手等的皮肤的移动一起移动时，用户可以获得虚拟宠物对皮肤的移动作出反应的印象。即，通过这个信息终端装置，在真实空间内的用户可以在虚拟宠物上执行动作，但是虚拟宠物不能在真实空间内执行任何动作。简言之，未呈现出虚拟宠物与真实空间之间的交互(interaction)。

发明内容

本发明要解决的问题

本说明书中公开的技术旨在提供一种信息处理设备和信息处理方法、一种显示设备和显示方法、以及一种信息处理系统，其擅长于通过优选的方式呈现虚拟物体与真实空间之间的交互。

问题的解决方案

鉴于以上问题，已经作出本申请，并且在权利要求1中公开的技术是一种信息处理设备，包括：

输出单元，向实际物体施加动作；以及

控制单元，其根据由虚拟物体对所述实际物体执行的动作或者由所述实际物体将要对所述虚拟物体执行的动作，控制所述输出单元的输出。