[发明专利]图像处理装置、方法及程序

说明书

技术领域

本发明涉及图像处理，特别地，涉及立体动画的各立体图像帧的双眼视差调整。

背景技术

专利文献1公开的立体图像处理装置，具有二维图像生成部及对于向用户显示的立体图像的立体感进行调整的立体感调整部。该立体图像处理装置中，如果所显示的被摄体达到极限视差，则立体感调整部做出响应，按照所获取的适当视差信息，以由视差控制部在以后的立体显示中实现该适当视差的方式生成视差图像。这时，通过按照三维数据将照相机参数设为最优而实现视差控制。另外，二维图像生成部计算满足适当视差的景深Fxy。在将景深范围设为K1至K2，将各像素的景深值设为Gxy时，该Fxy通过Fxy＝J1+（Gxy-K1）×（J2－J1）/（K2－K1）求出。此外，在Fxy非整数的情况下，实施四舍五入或使近置视差变小的处理。

专利文献1：日本特开2004－221699号公报

发明内容

但是，使用视差的立体动画，如果未以适当的视差量显示，则可能会引起观看者的疲劳。由于适当的视差量随着进行显示的显示器的尺寸或观看者的立体融合极限变化，因此必须进行与该变化相对应的视差调整。

视差调整的结果，如果以与拍摄时的视差不同的视差再生立体图像，则可能会给观看者造成不适感。因此，优选按照尽量保持立体动画拍摄时的原本的视差的方式进行视差调整。

在专利文献1中，由于计算满足适当视差的景深Fxy并进行四舍五入，因此，在帧之间视差相同，而感觉不到随帧切换的立体感变化，反之，在帧之间出现过大的视差变化，则可能会造成观看者疲劳。

本发明目的在于，通过立体动画的视差调整而防止较大损失原视差。

本发明提供一种图像处理装置，具有：代表视差获取部，其获取构成立体动画的全部或规定的一部分范围的多个立体图像帧各自的代表视差；场景分离部，其在由代表视差获取部获取的各立体图像帧的代表视差的最大值及最小值规定的视差宽度，不适合由预先设定的最大容许视差及最小容许视差规定的容许视差宽度的情况下，将立体动画分为多个场景；视差调整部，其针对由场景分离部分离的每个场景，判断由构成场景的立体图像帧的代表视差的最大值及最小值规定的场景视差宽度是否适合容许视差宽度，并对应于判断结果统一进行调整，以使得构成场景的各立体图像帧的代表视差适合容许视差宽度；以及输出部，其输出由视差调整部调整了代表视差后的立体图像帧。此外，这里所说的“代表视差”，例如是指立体图像帧内的关注被摄体等的代表性视差，即立体动画帧内的代表性视差。

另外，视差调整部在任意场景的场景视差宽度适合容许视差宽度，但构成任意场景的立体图像帧的代表视差的最大值超过预先设定的代表视差的上限的情况下，对构成任意场景的各立体图像帧的代表视差小于或等于代表视差进行调整，以使得代表视差的上限。

此外，视差调整部在与连续的大于或等于2个的场景相对应的各场景视差宽度适合容许视差宽度，但构成连续的大于或等于2个场景的立体图像帧的代表视差的最大值超过代表视差的上限的情况下，对构成连续的大于或等于2个的场景的各立体图像帧的代表视差进行统一调整，以使得代表视差小于或等于代表视差的上限。

此外，优选视差调整部在任意场景的场景视差宽度适合容许视差宽度，但构成任意场景的立体图像帧的代表视差的最小值低于预先设定的代表视差的下限的情况下，对构成任意场景的各立体图像帧的代表视差进行调整，以使得代表视差大于或等于代表视差的下限。

而且，优选视差调整部在与连续的大于或等于2个的场景相对应的各场景视差宽度适合容许视差宽度，但构成连续的大于或等于2个的场景的立体图像帧的代表视差的最小值低于代表视差的下限的情况下，统一地对构成连续的大于或等于2个的场景的各立体图像帧的代表视差进行调整，以使得代表视差大于或等于代表视差的下限。

另外，优选场景分离部在按照规定的第1基准分离的场景的场景视差宽度不适合容许视差宽度的情况下，按照规定的第1基准及与规定的第1基准不同的第2基准，对立体动画进行分离。

另外，优选第2基准与第1基准相比，场景变化的推定可靠度较低。

此外，优选视差调整部针对由场景分离部按照第1基准及第2基准分离的各场景，判断场景的场景视差宽度是否适合容许视差宽度，在判断场景的场景视差宽度不适合容许视差宽度的情况下进行调整，以使得构成场景的各立体图像帧的代表视差适合容许视差宽度。

而且，优选视差调整部在相邻的2个场景之间的代表视差的调整量之差超过规定的阈值的情况下，对相邻的2个场景间的代表视差的调整量进行平滑化。