[发明专利]图像显示系统

说明书

图像显示系统具有操作装置和图像显示装置。操作装置将示出用户的第1手指相对于操作装置的受理部的第1相对位置的第1位置信息、和示出输入到受理部的操作的操作信息发送至图像显示装置。图像显示装置从操作装置获取第1位置信息和操作信息，基于表示特定范围内的拍摄图像的拍摄图像数据和第1位置信息所示出的第1相对位置，生成表示显示用图像的显示用图像数据。在显示用图像中，在特定范围内的与受理部的位置对应的范围内配置面板图像，并且与第1相对位置对应的第1范围内的面板图像的可见性比第1范围外的面板图像的可见性低。图像显示装置在显示有显示用图像的状态下获取了示出受理特定操作的输入的特定操作信息的情况下，执行特定处理。

技术领域

本说明书中公开的技术涉及一种用于显示表示操作面板的面板图像的图像显示系统。

背景技术

例如，在日本专利第4574323号公报中公开了在包含触摸面板的现实空间图像上重叠地显示表示菜单的虚拟空间图像的复合现实感提示系统。在此，在现实空间图像包含操作触摸面板的用户的手指等的肤色的区域的情况下，在该区域不重叠虚拟空间的图像。

发明内容

发明要解决的问题

在上述的技术中，基于颜色来检测上述区域，因此为了防止误检测，在系统中产生设计上的限制。具体来说，例如触摸面板的颜色被限制为与用户的手指等颜色(即肤色)差异较大的颜色。另外，例如在用户佩戴手套等而导致手指的外观的颜色为与肤色不同的颜色的情况下，有可能无法检测上述区域。因此，对于需要佩戴手套的作业，很难应用上述系统。

在本说明书中公开了一种技术，即：在对与用户的手指的位置对应的范围的可见性降低了的图像进行显示的图像显示系统中，减少图像显示系统在设计上的限制。

由本说明书公开的图像显示系统可以是具有操作装置和以能够通信的方式与上述操作装置进行连接的图像显示装置。上述操作装置可以具有：主体；受理部，其在上述主体的表面露出，并受理由用户的手指进行的操作的输入；检测部，其检测上述用户的第1手指相对于上述受理部的第1相对位置；操作侧控制部，其将示出上述检测部检测的上述第1相对位置的第1位置信息、和示从输入至上述受理部的上述操作的操作信息发送到上述图像显示装置。上述图像显示装置可以具有：框架，其能够佩戴在上述用户的头部；显示部，其设置于上述框架，配置在与佩戴上述框架的上述用户的眼睛相向的位置；相机，其拍摄上述用户的视野范围对应的特定范围；以及显示侧控制部。上述显示侧控制部可以具有：获取部，其从上述操作装置获取上述第1位置信息和上述操作信息；生成部，其基于表示上述特定范围内的拍摄图像的拍摄图像数据、和所获取的上述第1位置信息所示出的上述第1相对位置，生成表示显示用图像的显示用图像数据，所述显示用图像包含示出用于输入特定操作的操作面板的面板图像，在上述显示用图像中，在上述特定范围内的与上述受理部的位置对应的范围配置上述面板图像，并且与上述第1手指的上述第1相对位置对应的第1范围内的上述面板图像的可见性比上述第1范围外的上述面板图像的可见性低；显示控制部，其使上述显示部显示由上述显示用图像数据表示的上述显示用图像；以及特定处理执行部，其在显示有上述显示用图像的状态下获取了示出在上述受理部受理了上述特定操作的输入的特定操作信息的情况下，执行与上述特定操作对应的特定处理。

根据上述的结构，图像显示装置基于拍摄图像数据和被操作装置检测的第1手指的第1相对位置来对显示用图像进行显示。在显示用图像中，与第1相对位置对应的第1范围内的面板图像的可见性比第1范围外的面板图像的可见性低。在可见性较低的部分，用户能够透过该部分看到自己的第1手指。用户能够一边观看面板图像一边掌握自己的第1手指的位置。第1手指的第1相对位置不是基于第1手指的颜色得到的，而是通过操作装置的检测部进行检测而得到的，所以操作装置的受理部的颜色并不被限制。另外，第1手指的外观的颜色可以为任何颜色，因此对于例如需要佩戴手套的作业，也能够采用本申请的图像显示系统。即，在对与用户的手指的位置对应的范围的可见性低下了图像进行显示的图像显示系统中，能够减少图像显示系统在设计上的限制。