[发明专利]图像处理设备及其控制方法

说明书

技术领域

本发明涉及图像处理设备、控制图像处理设备的方法和存储介质，尤其涉及能够显示三维视频图像的图像处理设备、控制该图像处理设备的方法和存储介质。

背景技术

近年来，作为三维(3D)视频图像提供的电影等的数量增大，并且根据该趋势，正在开发能够进行三维显示的家用TV设置。此外，已知设置有两个摄像光学系统的照相机作为用于拍摄3D视频图像的设备，并且消费型三维拍摄照相机也已经出现。

最近的数字照相机和视频照相机均配备有用于在拍摄前检测人物并在照相机的液晶面板上所显示的面部区域上叠加面部框的功能。照相机使用面部框内的图像控制曝光、聚焦等的拍摄参数，从而照相机能够获得对于人物被摄体最优化的图像。

关于上述三维拍摄照相机，通过对照相机主体设置可以观看三维图像的显示部，可以在检查三维效果的同时进行拍摄。在该情况下，三维地显示正在拍摄的被摄体，因此，需要在三维显示的同时在人面部区域上叠加面部框。

传统地，提出了以下装置：通过在三维图像数据上叠加用于指示三维图像上的预定位置的鼠标指针或要与三维图像一起显示的文字信息来显示三维图像数据(参见例如日本特开2001-326947)。

该三维图像显示装置连接至一般的个人计算机并用于使用鼠标编辑三维图像或使用键盘将文字输入至三维图像。在该装置中，当在三维图像上存在诸如鼠标指针等的指示单元时，进行控制以根据三维图像上放置指示单元的位置处的视差来显示具有视差的指示单元，以提高三维图像上的指示单元的可视性。

在该相关背景技术中，当对利用三维拍摄照相机所拍摄的左右视频图像进行面部检测时，面部框的大小和面部框相对于面部区域的相对位置在左右视频图像之间变化。

这将参考图22详细说明。在图22中，对三维拍摄照相机所拍摄的左右视频图像1901和1902进行面部检测，并且根据面部检测的结果以在各面部区域上叠加的方式显示面部框1903~1908。由于分别对左右视频图像1901和1902进行面部检测，因而各面部框的大小和面部框相对于相关联的面部区域的相对位置在左视频图像1901和右视频图像1902之间变化。

结果，在三维观看时面部框看上去双重模糊，或者导致面部和面部框之间的三维效果的差异，或者左右面部框对相关联的人物被摄体的移动跟随的程度不同，这降低了三维图像的可视性。

日本特开2001-326947所公开的技术用于根据诸如鼠标指针等的指示单元的位置来调整指示单元的视差。因此，将鼠标指针的大小等设置为预定值，以使得不在左右图像之间变化。关于左右图像各自上的指针的移动，检测鼠标操作，并且基于检测的结果调整显示位置和视差。

因此，不能基于从经由左右摄像系统各自输入的视频图像所检测到的信息而在适当的位置三维地显示诸如面部框等的标记。

发明内容

本发明提供一种能够以叠加在三维视频图像上的方式适当地显示面部框的图像处理设备、控制图像处理设备的方法和存储介质。

在本发明的第一方面中，一种图像处理设备，其包括显示单元，所述图像处理设备包括：获取单元，用于获取通过拍摄被摄体而获得的两个视频图像；检测单元，用于检测所述获取单元所获取的两个视频图像中的各视频图像内的面部区域；面部区域设置单元，用于将所述检测单元在所述两个视频图像中的一个视频图像内检测到的面部区域与所述检测单元在所述两个视频图像中的另一视频图像内检测到的面部区域相关联，并且设置相关联的面部区域显示在所述显示单元上的位置和大小，以使得所述相关联的面部区域的位置和大小相互一致；面部区域相关信息生成单元，用于生成面部区域相关信息，所述面部区域相关信息包括所述显示单元上要显示表示所述面部区域设置单元所设置的面部区域的面部区域图像的位置；面部区域图像生成单元，用于根据所述面部区域相关信息生成单元所生成的面部区域相关信息来生成所述面部区域图像；以及输出单元，用于分别将所述两个视频图像与所述面部区域图像生成单元所生成的面部区域图像进行合成，并且将合成后的视频图像输出至所述显示单元。