[发明专利]遮挡层扩展

说明书

技术领域

本发明涉及编码层深度格式(layer depth format)的可视数据的技术领域。

背景技术

分层深度图像(LDI)是编码呈现三维图像的信息的方式。类似地，分层深度视频(LDV)是编码呈现三维视频的信息的方式。

LDI/LDV将前景层和至少一个背景层用于传达信息。背景层也称为遮挡层。前景层包含主彩色图像/视频帧以及相关联的主深度图。至少一个背景层包含背景彩色图像/视频帧以及相关联的背景深度图。通常，遮挡层是稀疏的，因为它只包括主层中的前景物体覆盖的图像内容和前景物体遮挡的图像内容的相应深度信息。

生成LDI或LDV的方式是从不同视点利用两台或更多台摄像机捕获同一场景。然后，扭曲(warp)，即，偏移，和融合两台摄像机捕获的图像/视频，以便生成从位于不同视点之间的中心视点描绘同一场景的主图像/视频。

另外，可以使用两个捕获图像/视频帧生成与主图像/视频帧相关联的主深度图。深度图将深度值、差异值(disparity value)或等同于该差异的换算值(scaled value)指定给主图像/视频帧的每个像素，其中指定的差异值与各自像素所属的物体相对于主图像平面的距离成反比。

发明内容

按照现有技术，前景层和背景层具有相同水平宽度。本发明人认识到，这种相同尺寸不允许传达存在于至少两台摄像机捕获的图像/视频中的所有信息。

因此，本发明人提出了一种用于分层深度图像/视频帧的数据结构，它允许分层深度图像/视频帧的至少一个遮挡层具有比分层深度图像/视频帧的前景层更宽的水平宽度，其中遮挡层的水平宽度与在包含在前景层中的主深度图的横向边界区中包括的最大差异值成正比，该横向边界区由主深度图的预定数量的最外面列组成。

本发明人进一步提出了携带至少一个编码分层深度图像/视频帧的存储媒体，其中分层深度图像/视频帧的至少一个遮挡层具有比分层深度图像/视频帧的前景层更宽的水平宽度，其中遮挡层的水平宽度与在包含在前景层中包括的主深度图的横向边界区中的最大差异值成正比，该横向边界区由主深度图的预定数量的最外面列组成。

并且，本发明人提出一种用于分层深度图像/视频帧编码的方法，所述方法包含编码具有比分层深度图像/视频帧的前景层更宽的水平宽度的分层深度图像/视频帧的至少一个遮挡层，其中遮挡层的水平宽度与在包含在前景层中的主深度图的横向边界区中包括的最大差异值成正比，该横向边界区由主深度图的预定数量的最外面列组成。

类似地，还提出一种用于分层深度图像/视频帧编码的设备，所述设备适用于编码具有比分层深度图像/视频帧的前景层更宽的水平宽度的分层深度图像/视频帧的至少一个遮挡层，其中遮挡层的水平宽度与包括在包含在前景层中的主深度图的横向边界区中的最大差异值成正比，该横向边界区由主深度图的预定数量的最外面列组成。

附加水平宽度可以用于传达存在于至少两台摄像机捕获的图像/视频中但未包含在前景层中的信息部分。

进一步有利实施例的特征规定在从属权利要求中。

附图说明

在附图中例示了以及在如下描述中更详细地说明了本发明的示例性实施例。说明这些示例性实施例只是为了阐明本发明，而不是限制本发明的公开、定义在权利要求书中的范围或精神。

在附图中：

图1描绘了示例性深度图；

图2描绘了示例性多摄像机系统；

图3描绘了示例性立体拍摄；以及

图4描绘了示例性遮挡层扩展。

具体实施方式

本发明可以在包含相应适用的处理设备的电子设备上实现。例如，本发明可以在移动电话、个人计算机、数码相机系统或数字视频摄像机系统中实现。