[发明专利]空间不均等流媒体化

说明书

本申请涉及一种具有存储在其上的计算机程序的非暂时性数字存储介质，当所述计算机程序被计算机运行时，所述计算机程序用于执行用于对具有编码至其中的视频的视频比特流进行解码的方法。描述针对媒体内容流媒体化的各种概念。一些概念允许以空间不均等方式流媒体化空间场景内容，以使得用户的可见质量增加，或流媒体化提取位点处的处理复杂度或必需带宽减小。其他概念允许以增大对其他应用情境的适用性的方式流媒体化空间场景内容。

本申请是申请人为弗朗霍夫应用科学研究促进协会、申请日为2017年10月11日、申请号为201780076761.7、发明名称为“空间不均等流媒体化”的分案申请。

技术领域

本申请关于诸如在虚拟现实(VR)流媒体化中发生的空间不均等流媒体化。

背景技术

VR流媒体化通常涉及极高分辨率视频的传输。人类中央凹的解析能力为每度约60个像素。若考虑360°×180°的完整球的传输，则传输可通过发送约22k×11k个像素的分辨率而结束。由于发送此高分辨率将产生极高的带宽需求，因此另一解决方案为仅发送头戴式显示器(HMD)处所展示的视口，其具有90°×90°的视场，从而产生约6k×6k个像素的视频。以最高分辨率发送完整视频与仅发送视口之间的折衷为以高分辨率发送视口且以较低分辨率或较低质量发送一些相邻数据(或球体视频的其余部分)。

在DASH情境中，全向视频(亦称为球体视频)可以以之前所描述的混合分辨率或混合质量视频由DASH客户端控制的方式提供。DASH客户端仅需要知道描述内容如何提供的信息。

一个示例可以为提供具有不同投影的不同表示，其具有不对称特性，诸如针对视频的不同部分的不同质量及失真。每个表示将对应于给定视口且将使所述视口以比内容的其余部分高的质量/分辨率进行编码。知道定向信息(内容已经以较高质量/分辨率编码的视口的方向)，DASH客户端可动态地选择一个或另一表示以在任何时间匹配用户的观察方向。

DASH客户端为全向视频选择此不对称特性的更灵活选项可为当将视频分裂成若干空间区时，其中每一区可以不同分辨率或质量获得。一个选项可为基于栅格而将视频分裂成矩形区(亦称为图块)，但可预见其他选项。在此情况下，DASH客户端将需要关于以其提供不同区的不同质量的一些信令，且DASH客户端可以不同质量下载不同区，使得向用户展示的视口的质量优于其他未展示内容。

在先前情况中的任一个中，当用户交互发生且视口已改变时，DASH客户端需要一些时间对用户移动做出反应且以匹配新视口的方式下载内容。在用户移动与DASH客户端调适其请求以匹配新视口之间的时间期间，用户将在视口中同时看见高质量及低质量的一些区。虽然可接受质量/分辨率差异为内容相依的，但用户看见的质量在任何状况下都降低。

因此，即将具有缓解或更有效地显现或甚至增大关于通过自适应流媒体化而流媒体化的空间场景内容的部分呈现的用户的可见质量的概念可为有利的。

发明内容

因此，本发明的目的为提供用于以空间不均等方式流媒体化空间场景内容，以使得用户的可见质量增加，或流媒体化提取位点处的处理复杂度或必需带宽减小的概念，或提供用于以增大对其他应用情境的适用性的方式流媒体化空间场景内容的概念。

此目标通过申请中的独立权利要求的主题来达成。