[发明专利]3D视频分析

说明书

技术领域

本发明涉及一种用于分析三维(3D)视频素材(video material)的方法和装置。

背景技术

三维(3D)视频电视最近已经面向了消费者，并且预期3D设备和节目的量在接下来的几年内将快速增加。

3D电视依赖于立体技术，即，图像对(一对图像)被对应的相机捕获，该对应的相机横向地相距(即，基本上在水平的图像方向上)某一距离，例如用户的眼睛的典型间距。图像对因此表示同一场景中略微不同的视图；一般而言，它们将包含场景内的相同项目(偶尔在图像的极端位置处会有例外)，但是两幅图像之间的项目的相对位置将取决于诸如相机对齐和该项目距相机布置的距离之类的因素。

当图像被显示时，以下要求是重要的：用户的每只眼睛(至少主要地)看着图像对中对应的一个。实际上，这是通过各种方式实现的，例如通过用户佩戴偏振的、时间复用或者颜色过滤的眼镜，或者通过电视屏幕自身设有特殊的镜头装置，该镜头装置将两幅图像中的每一幅转向到观看者的对应的眼睛位置。其中，在3D电视技术中一般不使用早期在3D影院中通常尝试的颜色过滤技术。

返回到3D相机系统，图像对中的每一个由独立的相机捕获，该独立的相机具有其自身的镜头和图像捕获装置(例如CCD装置)。但是，为了维持观看者的3D错觉，很重要的是：每个图像对的两幅图像就它们的图像捕获属性而言紧密匹配。各种可调节的参数对于专业视频相机的操作者来说是可用的，但是设置3D相机布置的任务明显地比设置传统的(单个)视频相机要困难的多，这是因为不仅需要设置对于当前场景来说正确的各种参数，还需要设置参数以使得形成3D相机布置的两个相机生成具有相同的图像属性的图像。在家庭视频相机的情况下，对于用户来说可调节的范围受到更多的限制，这使得更加难以设置两个相机来提供相同的图像属性。

3D视频捕获的另一需要注意的方面是观看者对视频的感知。视频制作者可以过度使用3D效果，尤其是通过显示对象(在所观看的3D视频中)以使得它们出现在屏幕前面的过远处。这可能导致观看者产生主观上不愉快甚至反胃的感觉。类似地，突然地或者简单地太快的显示深度的变化也可能导致主观不愉快。这是因为3D显示会欺骗人类视觉系统，使其相信对象距观看者一定距离，该距离与观看者和显示屏幕之间的分离是不同的。观看者的眼睛本能地试图聚焦在对象的所感知的3D位置上，特别是当对象比显示屏幕更靠近观看者时。然而，为了观看3D视频，眼睛当然必须继续聚焦在显示屏幕的平面上。

发明内容

本发明提供了一种用于处理3D视频信号以生成图像深度指示符的图像分析装置，该3D视频信号包括表示场景的不同的对应视图的连续图像对，所述装置包括：

相关器，该相关器被配置为将所述图像对中的一者的图像区域与所述图像对中的另一者的图像区域进行相关，以检测两幅图像之间的相应图像区域的位移；

图形生成器，该图形生成器被配置为针对可能的位移值的范围生成跨所述图像对的位移的分布的图形表示；以及

显示生成器，该显示生成器用于生成关于当前对显示位置处的当前图像对和关于在其他显示位置处的多个在前图像对的图形表示以进行显示，从而提供所述位移的分布的变化的基于时间的表示。

本发明还提供了一种用于处理图像以生成图像聚焦指示符的图像分析装置，所述装置包括：

聚焦检测器，该聚焦检测器被配置为检测多个图像块的各自的局部聚焦估计，并对局部聚焦估计进行组合以生成该图像的图像聚焦指示符。

本发明的另外的各个方面和特征在权利要求中定义。

附图说明

现将仅通过示例的方式并参考如下的附图描述本发明的实施例：

图1示意性地图示了3D相机系统

图2示意性地图示了3D视频分析装置；

图3示意性地图示了3D视频分析装置的另一实施例；

图4示意性地图示了视频处理器；

图5示意性地图示了单元处理器；

图6是提供了关于接收到的3D(L/R)视频信号的视频处理器的操作的概况的示意图；

图7示意性地图示了深度检测器和深度指南时间绘图器；

图8是示意性示例图像；

图9示意性地图示了图8的图像的一部分；

图10示意性地图示了颜色表示尺度；

图11示意性地图示了深度直方图；

图12示意性地图示了直方图历史显示；

图13示意性地图示了帧违规(frame violation)情况；