[发明专利]图像处理装置、图像处理方法以及摄像装置

说明书

技术领域

本发明涉及用于判定通过摄影装置等图像输入设备生成的一系列多帧图像中的被摄体的主要度的技术。

背景技术

例如，希望对于数字照相机拍摄的图像进行图像处理以能够感到图像更好。这种情况下，通过在图像内划分出由摄影者判断为主要被摄体的被摄体(主要度高的被摄体)所存在的区域及其以外的区域进行处理，能得到有效的结果。例如，可以进行通过提升主要度高的被摄体的彩度，降低此外的被摄体的彩度，使得主要度高的被摄体更为醒目等的图像处理。另外，除了这种图像处理之外，在进行数字照相机的自动调焦(AF)控制和自动曝光调节(AE)控制等时，对AF和AE控制部输入主要被摄体的信息，能进行更为有效的控制。例如，在动态图像摄影时，控制为持续检测(跟踪)主要度高的被摄体在画面内所存在的位置，从而能够持续对该位置进行对焦和曝光，使得照相机的使用便利性得以提升。

因此，为了更有效地进行上述图像处理和摄像的AF、AE等控制，更为准确地判定所拍摄的图像中被摄体的主要度就变得重要起来。

在日本特许第4254873号公报中所公开的技术是根据所输入的图像检测脸部图像，按照脸部图像的位置、动作和速度，确定被摄体的重要度和优先顺序。在该日本特许第4254873号公报中，在判定被摄体的主要度时遵从如下基准。

(1)检测脸部的大小越大则越提高主要度。

(2)检测脸部的动作越快则越降低被摄体的主要度。

(3)存在多个检测脸部的情况下，越处于帧下侧的脸部则越提高主要度。

(4)存在多个检测脸部的情况下，除了(3)之外越接近脸部重心则越提高主要度。

另外，日本特开2010-9425号公报中公开的技术是当画面内映有多个被摄体的情况下，根据这些被摄体的动作确定被摄体的主要度。在日本特开2010-9425号公报所公开的技术中，将拍摄了动态图像的摄影装置的动作与画面内所映的被摄体的动作一起提取出来。而且使用这些动作的差(相对速度)确定被摄体的主要度。即，若在摄影者改变摄影装置的朝向的同时跟踪被摄体，则相对速度会变低。反之，若固定了摄影装置的朝向，不跟踪被摄体，则相对速度会上升。并且，将相对速度低的被摄体作为主要被摄体。

日本特许第4254873号公报所公开的内容中，仅使用检测出的脸部大小、数量、动作速度作为从图像得到的特性值，进行被摄体主要度的判定，存在有时无法可靠地反应摄影者意图的情况的问题。例如，当行人横穿原本作为被摄体的人物与摄影者之间的情况下，会检测出该行人的脸部。检测出的脸部(行人的脸部)大小大于原本作为被摄体的人物的脸部大小，因此存在所得到的判定结果不太理想的可能。

在日本特开2010-9425号公报所公开的内容中，例如当欲拍摄的主要被摄体的动作快的情况下，当使摄影装置朝向主要被摄体方向进行构图确定等的过程中，无法在画面内捕捉住该被摄体，主要被摄体脱出画面外(摄影范围之外)的情况下，可能会将该被摄体的主要度判定得低。

其结果，图像处理和AF、AE等控制有时会与用户所期待的内容不同。

发明内容

本发明就是鉴于上述课题而完成的，其目的在于提供一种能更为准确地判定图像中被摄体的主要度的技术。

根据本发明的第一方面，图像处理装置判定被摄体在图像中的主要度，其具有：图像输入部，其输入按照时序拍摄得到的一系列多帧图像；判定对象区域提取部，其从通过上述图像输入部输入的上述多帧图像中提取出作为进行主要度判定的对象的判定对象区域；以及判定部，其根据上述多帧图像中的上述判定对象区域的出现频度，对上述判定对象区域的主要度进行判定。

根据本发明的第二方面，图像处理方法判定被摄体在图像中的主要度，具有：图像输入步骤，输入按照时序拍摄得到的一系列多帧图像；判定对象区域提取步骤，从在上述图像输入步骤中输入的上述多帧图像中提取出作为进行主要度判定的对象的判定对象区域；以及判定步骤，根据上述多帧图像中的上述判定对象区域的出现频度，对上述判定对象区域的主要度进行判定。

根据本发明的第三方面，摄像装置具有能够对通过摄影镜头形成的被摄体像进行光电转换而输出图像信号的摄像元件，其具有：图像输入部，其输入从上述摄像元件按照时序输出的一系列多帧图像；判定对象区域提取部，其从通过上述图像输入部输入的上述多帧图像中提取出作为进行主要度判定的对象的判定对象区域；以及判定部，其根据上述多帧图像中的上述判定对象区域的出现频度，对上述判定对象区域的主要度进行判定。

附图说明