[发明专利]图像处理设备和方法

说明书

技术领域

本公开涉及图像处理设备、方法和程序，具体地涉及能够获得更加自然的图像而没有不适的图像处理设备、方法和程序。

背景技术

迄今，为了获得较高质量的图像，已使用了相对于图像执行感觉调整的图像处理。例如，作为这样的图像处理，已提议了控制从图像中检测的脸区域的感觉的过程以及保持陡峭边缘部分不变并强调除了边缘之外的区域的过程(例如参见日本待审专利申请公布第2001-298621号)。

发明内容

然而，在上面描述的技术中，存在可能无法获得自然图像而没有不适的时候。例如，在控制脸区域的感觉的图像处理中，由于除了脸区域之外的区域的感觉未被控制，所以与脸区域相比，其它区域的锐度可能被过分强调。这样做时，当作为整体捕捉图像的场景时，就集中在诸如人之类的高度感兴趣的区域上的人类视觉特性而言，深度感丧失，并且图像具有不适感。

特别地，在使用诸如立体图像(3D图像)之类的视差来显示深度的显示设备中，相对于视差使用增强等创建的图像变得不自然，并且对于观察者识别的透视感具有不良影响。

另外，在用于强调非边缘区域的图像处理中，作为整体的图像的对比度和锐度被强调；然而，由于针对诸如前景和背景之类的每个区域的对比度和锐度的强调可能未被控制，所以存在可能无法获得足够自然的图像的情况。

希望获得更加自然的图像而没有不适。

根据本公开的实施例的图像处理设备包括：深度控制信号生成单元，其基于输入图像的每个区域中的主体的深度位置，生成控制所述输入图像的每个区域的感觉的强调程度的深度控制信号；脸皮肤区域控制信号生成单元，其基于所述输入图像中的人脸皮肤区域，生成控制所述输入图像中的每个区域的感觉的强调程度的脸皮肤区域控制信号；人区域控制信号生成单元，其基于所述输入图像中的人的区域，生成控制所述输入图像中的每个区域的感觉的强调程度的人区域控制信号；以及控制信号合成单元，其合成所述深度控制信号、所述脸皮肤区域控制信号和所述人区域控制信号以生成控制信号。

在图像处理设备中，可以进一步提供图像处理单元，其基于所述控制信号调整所述输入图像的每个区域的感觉并生成输出图像。

在图像处理单元中，可以基于所述控制信号放大或衰减所述输入图像的边缘分量。

在图像处理单元中，可以基于所述控制信号放大所述输入图像的纹理分量。

在图像处理单元中，可以基于除了所述控制信号之外的控制信号来放大或衰减所述输入图像的边缘分量。

在图像处理单元中，可以提供：预测系数选择单元，其针对所述输出图像的每个区域选择在基于所述控制信号生成所述输出图像中使用的预测系数；以及预测计算单元，其基于所述输入图像和所述预测系数，生成与所述输入图像相比具有更高分辨率的输出图像。

在图像处理单元中，可以相对于所述控制信号放大或衰减所述输入图像的色度分量。

在图像处理设备中，进一步提供兴趣区域控制信号生成单元，其基于所述输入图像中的被估计为高度感兴趣的区域生成控制所述输入图像中的每个区域的感觉的强调程度的兴趣区域控制信号，并且所述控制信号合成单元可以合成所述深度控制信号、所述脸皮肤区域控制信号、所述人区域控制信号和所述兴趣区域控制信号以生成控制信号。

在脸皮肤区域控制信号生成单元中，基于从所述输入图像中的人脸区域的检测结果，指定所述人脸皮肤区域，并且生成所述脸皮肤区域控制信号。在没有从过程对象的输入图像中检测到人脸区域的情况下，基于以前输入图像中的人脸皮肤区域的特定结果，可以在过程对象的输入图像中指定人脸皮肤区域。

在人区域控制信号生成单元中，使用从所述输入图像中的人脸区域的检测结果或所述输入图像的人脸皮肤区域的特定结果中的至少一个，可以指定所述输入图像中的人的区域并生成所述人区域控制信号。

本公开的一个实施例的图像处理方法或程序包括：基于输入图像的每个区域中的主体的深度位置，生成控制所述输入图像的每个区域的感觉的强调程度的深度控制信号；基于所述输入图像中的人脸皮肤区域，生成控制所述输入图像中的每个区域的感觉的强调程度的脸皮肤区域控制信号；基于所述输入图像中的人的区域，生成控制所述输入图像中的每个区域的感觉的强调程度的人区域控制信号；以及合成所述深度控制信号、所述脸皮肤区域控制信号和所述人区域控制信号以生成控制信号。