[发明专利]多维视频转码

说明书

本公开涉及多维视频转码。一种用于对多维视频进行转码的示例装置包括多维视频解码器，用于对多维视频的第一比特流进行解码。该装置还包括转码器，用于对经解码第一比特流进行转码以生成经转码多维数据。该装置还包括多维视频编码器，用于基于经转码多维数据来生成第二比特流。

技术领域

本公大体涉及图像处理领域，更具体地，涉及多维视频转码。

背景技术

视频转码可以用于将第一比特流转换为具有不同分辨率或比特率的第二比特流。例如，可以使用具有可能不支持第一比特流的带宽的网络来流送第二比特流，或者使用支持第二比特流的较低分辨率的设备来播放第二比特流。

发明内容

根据本公开的一方面，提供了一种用于对多维视频进行转码的装置。该装置包括：多维视频解码器，用于对多维视频的第一比特流进行解码；转码器，对经解码第一比特流进行转码以生成经转码多维数据；以及多维视频编码器，用于基于经转码多维数据来生成第二比特流。

根据本公开的另一方面，提供了一种用于对多维视频进行转码的方法。该方法包括：通过处理器接收多维视频的第一比特流；通过处理器对第一比特流进行解码；通过处理器对经解码第一比特流进行转码，以生成经转码多维数据；以及通过处理器基于经转码多维数据来生成第二比特流。

根据本公开的另一方面，提供了一种用于对多维视频进行转码的系统。该系统包括：用于对多维视频的第一比特流进行解码的装置；用于对经解码第一比特流进行转码以生成经转码多维数据的装置；以及用于基于经转码多维数据来生成第二比特流的装置。

附图说明

图1是示出用于对多维视频进行转码的示例系统的框图；

图2是示出用于对多维视频进行转码的另一示例系统的框图；

图3是示出用于对多维视频进行转码的方法的流程图；

图4是示出可以对多维视频进行转码的示例计算设备的框图；以及

图5是示出存储用于对多维视频进行转码的代码的计算机可读介质的框图。

本公开和附图通篇使用相同的数字来指代相似的组件和特征。100系列中的数字是指最初在图1中找到的特征；200系列中的数字是指最初在图2中找到的特征；以此类推。

具体实施方式

如本文中所使用的，多维视频是指包括三个或更多个维度的视频。例如，体积视频可以包括三个维度，光场视频可以包括四个到八个维度，而沉浸式视频可以具有六个自由度(相当于四个到五个维度)。多维视频可以包括体积视频、沉浸式视频、以及光场视频。体积视频包括同时记录每个方向的视图的视频记录。例如，可以使用全向相机或相机的集合来捕获体积视频。在普通平面显示器上播放期间，观看者可以像全景那样控制观看方向。

可以使用各种技术来捕获和生成多维视频，包括沉浸式视频、基于点云的视频、以及光场。例如，沉浸式视频编解码器使得能够捕获和编码视频的多个视图，并且通过解码器将其呈现在特定的视口内。如本文中所使用的，视口是纹理在全向或3D图像或视频的视场的平面表面上的投影，其适合于显示以及由具有特定观看位置和取向的用户观看。例如，视口可以是具有特定角度二维视图，该二维视图通过用户佩戴的头戴式显示器(HMD)显示，以提供不同的观看位置和取向来改变特定视图。例如，可以基于佩戴HMD设备的用户的移动来旋转、平移视图等。

光场描述了在给定的样本点处来自所有方向的入射光。光场可以用于后期处理，以生成诸如景深之类的效果并且允许用户略微移动其头部。