[发明专利]图像处理设备，图像处理方法和程序

说明书

技术领域

本发明涉及一种图像处理设备，图像处理方法和程序。

背景技术

诸如移动音乐播放器和数字照片浏览器之类的消费电子产品(下面称为“CE电器”)的远程操作一般由用户操作遥控器进行。不过，就这种方法来说，需要称为“遥控器”的设备。为此，还存在一种使用户能够在不利用遥控器的情况下，借助由用户的身体和/或手做出的姿势，操作电器的技术。

例如，存在一种利用3D传感器来检测反射图像中，对应于人物的区域和身体运动的技术，所述3D传感器能够通过发射红外光和测量反射光获得深度信息。还有一种利用普通照相机，并且主要把视频图像中的运动区域识别成人物的身体运动的技术。作为一个例子，应用这些技术的视频游戏已被商业化。

例如，日本公开特许公报No.2008-40576和2004-78977，及日本公开特许公报(翻译后的PCT申请)No.2009-519552公开利用普通照相机特别识别人手的形状，并根据手的形状图案和位置的变化，来识别手势的技术。作为提出的这种技术的扩展，提出了从视频图像中识别手或人物本身的技术，如在日本公开特许公报No.2009-140283中公开的那样。

把视频图像中人的手或身体的形状和/或位置的变化识别成手势的方法有两种。一种方法专注于已识别的人的手或身体的相对变化。如图11A中所示，识别手的形状，并计算手的位置的相对变化。图11A和11B是用于表示图像显示设备30的屏幕的示图，表示在用软件操作音乐播放器的状态。音乐CD的封套照片55和窗口(图像框)50被显示在图像显示设备30的屏幕上，在所述窗口中，显示由照相机10拾取的用户80的图像。

如图10中所示，照相机10安装在图像显示设备30上。图10是用于表示用户1，照相机10和图像显示设备30之间的关系的示图。一旦识别出用户的手82，就在用户1做手势的时候，继续进行识别，当手下次被识别为手83时，手82和手83之间的相对变化被确定为手势。

如图11B中所示，另一种方法识别手84的形状，并利用手84的绝对位置。显示在窗口50中的图像的绝对坐标被用于计算识别的手84的坐标位置。窗口50中的手84随后与通过覆盖(重叠)在图像中的设定位置而显示的GUI元件，比如按钮52交互作用。

不过，当图10中所示的照相机10和用户1之间的距离变化时，图中的用户80的大小也变化。即，如果照相机10和用户1之间的距离较近，那么在窗口50中的图像中，用户80将显得较大，如图12A中所示，而如果照相机10和用户1之间的距离较远，那么在窗口50中的图像中，用户80将显得较小，如图12B中所示。

为此，当用户1在照相机10前面的某一位置时，在当用户80在屏幕上显得较大时和当用户80在屏幕上显得较小时之间，手84可在图像内移动的范围将不同。当用户在屏幕上显得较大时，如图12A中所示，手84能够在范围62中移动，不过当用户在屏幕上显得较小时，如图12B中所示，手84只能够在范围64中移动。因此，如果通过覆盖而显示的诸如按钮之类的GUI元件总是被置于相对于窗口50设定的相同位置，那么当用户80在屏幕上显得较小时，用户1需要在照相机10前面来回走动，以便触及诸如按钮52之类的GUI元件。图12A和12B是用于表示显示在窗口50中的图像的示图。

在公报No.2009-519552中，尽管出现如图12A和12B中所示，图像中的用户的大小按照照相机和用户之间的距离的变化而变化的问题，不过未对该问题给予任何考虑。公报No.2004-78977未把用照相机拾取的图像用作GUI显示。不过，存在为了触及虚拟开关(所述虚拟开关是GUI元件)，用户需要移动的距离按照照相机和用户之间的距离而变化的问题。

发明内容

鉴于上述问题，构思了本发明，本发明的目的是提供一种能够可靠地把GUI元件部署在图像中，用户易于操作的位置的新的改进的图像处理设备，图像处理方法和程序。

按照本发明的一个实施例，提供一种图像处理设备，所述图像处理设备包括检测单元，所述检测单元检测由成像单元通过摄像而获得的图像数据产生的图像中的整个人物或者人物的一部分，位置/大小计算单元，所述位置/大小计算单元计算检测的图像中的整个人物或者人物的一部分的大小和位置，和GUI部署单元，所述GUI部署单元根据计算的大小和位置，在图像上部署将通过重叠在由图像数据产生的图像上而显示的图形用户界面(GUI)元件。