[发明专利]一种处理视频的方法及系统

说明书

技术领域

本发明涉及视频处理。更具体地，本发明涉及一种将深度信息用作增强层的方法和系统。

背景技术

数字视频功能可纳入很多设备中，例如，数字电视、数字直播系统、数字录音设备及类似设备。较之于常规的模拟视频系统，在处理和传输视频序列方面数字视频设备可提供带宽效率增加的显著改进。

可以二维(2D)格式或三维(3D)格式记录视频内容。在各种应用中，例如，DVD电影和数字电视(DTV)，由于其对观众而言比2D副本更真实，3D视频通常是有吸引力的。3D视频包括左视图视频和右视图视频。

已建立各种视频编码标准用于以压缩方式对数字视频序列进行编码，各种视频编码标准例如MPEG-1、MPEG-2、MPEG-4、MPEG-C的第三部分、H.263、H.264/MPEG-4高级视频编码(AVC)，多视点视频编码(Multiview Video Coding)(MVC)和可伸缩视频编码(SVC)。例如，MVC标准是H.264/MPEG-4AVC标准的扩展，其可提供高效三维视频编码。SVC标准也是H.264/MPEG-4AVC标准的扩展，其可使能部分比特流的传输和解码，从而提供较低时间分辨率、或较低空间分辨率或降低的保真度的视频服务，同时保持与使用H.264/MPEG-4AVC时所实现的相似的重建品质。

比较本发明后续将要结合附图介绍的系统，现有技术的其它局限性和弊端对于本领域的技术人员来说是显而易见的。

发明内容

本发明提供一种将深度信息用作增强层的方法和系统，并结合至少一幅附图进行展示和/或描述，且在权利要求中对其作出更加完整的阐明。

根据本发明的一个方面，提供一种处理视频的方法，所述方法包括如下步骤：

在包括一个或多个深度传感器的单像三维(3D)视频生成装置中：

将捕获的二维(2D)视频图像数据存储为基础层；以及

将捕获的相应深度信息存储为增强层。

优选地，所述方法还包括通过所述单像三维视频生成装置的一个或多个图像传感器捕获所述二维视频图像数据。

优选地，所述方法还包括通过所述单像三维视频生成装置的一个或多个深度传感器捕获所述相应深度信息。

优选地，所述方法还包括基于所述视频渲染设备的请求和/或所述视频渲染设备的性能和/或能力，确定确定是否传输所述增强层至视频渲染设备。

优选地，所述方法还包括：

编码所述基础层；以及

基于所述确定传输所述增强层至所述视频渲染设备而对所述增强层进行编码。

优选地，所述方法还包括传输所述编码的基础层和/或所述编码的增强层至所述视频渲染设备。

优选地，所述视频渲染设备确定是否利用所述传输的增强层。

优选地，所述视频渲染设备：

解码所述传输的基础层；以及

基于所述确定利用所述传输的增强层对所述传输的增强层进行解码。

优选地，所述视频渲染设备利用所述解码的基础层和所述解码的增强层生成三维视频，所述解码的基础层包含所述二维视频图像数据，所述解码的增强层包含所述相应深度信息。

优选地，所述视频渲染设备利用所述解码的基础层生成二维视频，所述解码的基础层包含所述二维视频图像数据。

根据本发明的另一个方面，提供一种处理视频的系统，所述系统包括：

在包含一个或多个深度传感器的单像三维视频生成装置内使用的一个或多个处理器和/或电路，其中所述一个或多个处理器和/或电路用于：

将捕获的二维视频图像数据存储为基础层；以及

将捕获的相应深度信息单独存储为增强层。

优选地，所述一个或多个处理器和/或电路用于通过所述单像三维视频生成装置的一个或多个图像传感器捕获所述二维视频图像数据。

优选地，所述一个或多个处理器和/或电路用于通过所述单像三维视频生成装置的一个或多个深度传感器捕获所述相应深度信息。

优选地，所述一个或多个处理器和/或电路用于基于所述视频渲染设备的请求和/或所述视频渲染设备的性能和/或能力，确定是否传输所述增强层至视频渲染设备。

优选地，所述一个或多个处理器和/或电路用于：

编码所述基础层；以及

基于所述确定传输所述增强层至所述视频渲染设备而对所述增强层进行编码。