[发明专利]感兴趣区域的可控视频编码技术

说明书

视频编码技术包括基于包括一个或多个感兴趣区域的坐标、目标复杂度、残差编码器比特数据、请求质量、当前视频数据帧和重构视频数据帧之间的差异、目标质量、请求比特率、帧目标比特分配和编码比特率中的一个或更多个的信息对一个或多个感兴趣区域或一个或多个非感兴趣区域的不同比特速率或不同质量的编码。

背景技术

许多技术用于减少视频传输或存储所消耗的数据量。一种常见的技术是采用视频帧数据的可变比特率编码。例如，第一比特率可用于编码一个或多个感兴趣区域(regionsof interest，简称ROI)，第二比特率可用于编码一个或多个非感兴趣区域。参考图1A，图1A示出了示例性的视频帧图像。帧图像中包含珠宝的部分比帧图像中通常包含背景的其余部分更重要。关于珠宝的感兴趣区域(ROI)110由边界框120指定，其余部分为非感兴趣区域130。检测到的感兴趣区域(ROI)110使用更高的比特率编码，因此珠宝的图像将比图像中使用较低比特率编码的非感兴趣区域130部分具有更好的图像质量。

感兴趣区域的检测以及感兴趣区域和非感兴趣区域的可变比特率编码是计算密集型的，而且，可变比特率编码调整困难，因此，有必要继续改进视频图像的可变比特率编码。

发明内容

通过参考以下描述和附图，可以最好地理解本技术，这些描述和附图用于说明指向可控视频处理系统和方法的本技术的实施例。

在一个实施例中，视频处理单元包括感兴趣区域检测器、视频编码器和速率控制器。感兴趣区域检测器用于接收输入视频流，并确定输入视频流的图像数据帧的一个或多个感兴趣区域。视频编码器用于使用第一比特率对确定的一个或多个感兴趣区域和使用第二比特率对一个或多个非感兴趣区域进行差分编码，以生成图像数据帧的压缩比特流。速率控制器用于控制感兴趣区域检测的一个或多个参数，并基于请求质量、编码质量估计和复杂度估计中的一个或多个来控制一个或多个比特率编码的参数。

在另一个实施例中，视频处理单元包括可通信地耦合在一起的感兴趣区域检测器、速率控制器和视频编码器。感兴趣区域检测器用于确定图像数据帧中的一个或多个感兴趣区域。速率控制器包括感兴趣区域/非感兴趣区域比特分配单元、感兴趣区域量化模型单元和非感兴趣区域量化模型单元等。感兴趣区域/非感兴趣区域比特分配单元用于基于帧级比特分配、一个或多个确定的感兴趣区域的坐标、一个或多个感兴趣区域和一个或多个非感兴趣区域的复杂度估计、以及一个或多个感兴趣区域和非感兴趣区域的质量估计来生成感兴趣区域的目标比特分配和非感兴趣区域的目标比特分配。

感兴趣区域量化模型单元用于基于感兴趣区域的目标比特分配生成感兴趣区域量化参数。非感兴趣区域量化模型单元用于基于非感兴趣区域的目标比特分配生成非感兴趣区域量化参数。视频编码器用于基于感兴趣区域的量化参数和非感兴趣区域的量化参数生成图像数据帧的压缩比特流。

在另一个实施例中，视频处理方法包括：确定当前视频数据帧的一个或多个感兴趣区域；为当前视频数据帧的一个或多个确定的感兴趣区域和一个或多个非感兴趣区域确定一个或多个量化参数或一个或多个失真率参数；基于一个或多个确定的感兴趣区域、一个或多个确定的量化参数或失真率参数以及请求质量将当前视频数据帧编码为压缩比特流。

提供上述概要描述是为了以简化的形式介绍一些概念，这些概念将在下面的具体实施方式中进一步描述。该概要描述不旨在确定所要求保护的主题的关键特征或基本特征，也不旨在限制所要求保护的主题的范围。

附图说明

本公开实施例以示例而非限制的方式在附图中进行说明，其中相似的标记数字表示类似的元件，其中：

图1A和1B示出了示例性的视频帧图像；

图2示出了根据本公开实施例的视频处理单元的框图；

图3示出了根据本公开实施例的视频处理的流程图。

图4示出了根据本公开实施例的视频速率控制器的框图。