[发明专利]使用图块和图块组的感兴趣区域视频编码

说明书

相关申请的交叉引用

本申请要求2012年09月18日提交的美国临时专利申请No.61/702,676的权益，所述申请的内容以引用的方式结合于此。

背景技术

在主观质量与H.264/AVC相同的情况下，高效视频编码(HEVC)可以达到两倍的压缩率。随着智能手机和平板电脑的迅速增长，例如但不限于视频流、视频聊天、视频分享和游戏的移动视频应用已经变成人们日常生活的一部分。即使有了4G移动网络的实施，移动设备上迅速增长的视频流量仍对无线网络基础设施提出了巨大的需求。可在移动空间中使用HEVC以减缓部分带宽问题。超级HDTV(U-HDVC)的使用可能是使市场接受HEVC的驱动力。

HEVC可以包括若干编码工具以改善编码效率，例如但不限于扩展的视频块大小(例如，高达64x64)、大转换尺寸(例如，高达32x32)、先进的运动矢量预测(AMVP)和采样自适应偏移(SAQ)。HEVC可提供对并行化的支持，包括但不限于如下工具：除切片结构外，还有波前(Wavefront)并行处理(WPP)和图块(tile)。当使用WPP和/或图块时，对应于图像的视频流可以被分组成独立可解码的比特流子集，而不会招致切片头部的额外开销。WPP和图块可以把一个图像分割成区域以使这些区域能够同时并行解码。

发明内容

公开了关于使用图块及图块组的感兴趣区域视频编码的系统、方法和手 段。可以包括时间系列图像的编码后的视频序列，图像被分割为多个图块。多个图块可被分成至少一个或多个图块组，条件是表示该图像的所有图块不都是该图块组的成员。可以接收用于指示该至少一个或多个图块组的参数的信令。可以对图块组进行解码并且可以显示与该解码后的图块组相关联的图像的ROI。可以仅解码该ROI中的图块组。该至少一个图块组或多个图块组的参数可包括图块组的数量、每一个图块组中的图块的数量和每一个图块的索引。可以在图像参数组(PPS)、视频可用性信息(VUI)或补充增强信息(SEI)消息中用信号发送该至少一个或多个图块组的参数。可以约束图块组以使根据其参考图像中的同一图块组的像素对该图块组中的所有像素进行时间预测。

视频解码器可以接收用于指示感兴趣区域(ROI)的信令，或所确定的感兴趣区域(ROI)。由发送者或接收者或者二者协商来确定ROI。如果发送者确定或协商确定ROI，比特流中的信令是有必要的。例如，内容提供者可识别一个或多个感兴趣区域并且可将这些ROI的表示(跨时间的空间定义)编码为比特流(例如，可通过相对于该图像左上角的顶点的像素坐标来指示ROI)。在解码器一侧，可以在用户接口中将可用的ROI呈现给终端用户，并且该终端用户可以选择ROI以仅观察那一区域。也可以在比特流之外传输ROI信息。在另一个示例中，可提供允许终端用户在被显示的视频内容中识别感兴趣区域的用户接口，设备可缩放以显示ROI，并且所述缩放可导致从该显示中排除该视频内容的其他区域。ROI可以对应于被显示的图像并且被显示的图像可以是编码后的视频序列中的一部分。可能不对全部的编码后的视频序列进行解码，而仅解码被显示的图像，或者与被显示的图像重叠的图块或图块组。

附图说明

图1是示出在水平维度和垂直维度将图像均匀分割成图块的示例的图。

图2a是示出被包含在4个图块中的2个图块内的ROI的示例的图。

图2b是示出在时间实例(T+1)在ROI中而在时间实例(T)在ROI外的块的示例的图。

图3是示出将图像中的图块分组为多于一个图块组的示例的图。

图4是示出将图像中的多个图块的一部分分组到一个图块组的示例的图，其中该多个图块中的另一部分不属于该图块组。

图5是示出图块组中的块的运动预测的约束的示例的图。

图6是示出即使正当图块组(和图块)剧烈变化时图块组中的块的运动预测的约束的示例的图。

图7是示出即使正当图块组剧烈变化并且新增了图块组时图块组中的块的运动预测的约束的示例的图。

图8A是可以实施一个或多个公开的实施方式的示例通信系统的系统图。

图8B是可以在图8A所示的通信系统中使用的示例无线发射/接收单元(WTRU)的系统图。

图8C是可以在图8A所示的通信系统中使用的示例无线电接入网和示例核心网的系统图。

图8D是可以在图8A所示的通信系统中使用的另一示例无线电接入网和另一示例核心网的系统图。