[发明专利]用于应用感知和内容感知的实时视频编码的系统和方法

权利要求书

1.一种系统，包括：

至少一个物理处理器；

包括计算机可执行指令的物理存储器，当由所述物理处理器执行时，所述计算机可执行指令指令使所述物理处理器：

接收与应用相关联的用于编码的视频流；

用语义类别来标记所述视频流内的帧的一个或更多个区域；

至少部分地基于与所述视频流相关联的所述应用，确定所述语义类别的优先化；和

至少部分地基于所述语义类别的所述优先化来将编码资源分配给所述帧的一个或更多个部分，所述帧的所述一个或更多个部分包括所述帧的所述一个或更多个区域的至少一部分。

2.根据权利要求1所述的系统，其中所述计算机可执行指令还使所述物理处理器：

接收用于编码的附加视频流；

确定所述附加视频流与附加应用相关联；

分析所述附加视频流，以用所述语义类别标记所述附加视频流内的附加帧的一个或更多个附加区域；和

至少部分地基于与所述附加视频流相关联的所述附加应用，确定所述语义类别的附加优先化，至少部分地基于所述附加应用不同于所述应用，所述语义类别的所述附加优先化不同于所述语义类别的所述优先化。

3.根据权利要求1所述的系统，其中所述计算机可执行指令还使所述物理处理器：

接收用于编码的附加视频流；

确定所述附加视频流与所述应用相关联；

分析所述附加视频流，以用附加语义类别来标记所述附加视频流内的附加帧的一个或更多个附加区域；和

至少部分地基于与所述附加视频流相关联的所述应用，确定所述附加语义类别的附加优先化，至少部分地基于所述附加语义类别不同于所述语义类别，所述附加语义类别的所述附加优先化不同于所述语义类别的所述优先化。

4.根据权利要求1所述的系统，其中确定所述视频流与所述应用相关联包括以下至少一项：

识别发起所述视频流的应用；或者

识别定义所述视频流的使用的一个或更多个参数。

5.根据权利要求1所述的系统，其中至少部分地基于所述语义类别的所述优先化来将编码资源分配给所述帧的所述一个或更多个部分包括对所述帧的所述一个或更多个部分执行压缩，其中所述压缩涉及随着优先化程度的增加而具有较低程度的信息丢失的压缩方案。

6.根据权利要求1所述的系统，其中至少部分地基于所述语义类别的所述优先化来将编码资源分配给所述帧的所述一个或更多个部分包括对所述帧的所述一个或更多个部分执行压缩，其中所述压缩涉及压缩方案，所述压缩方案选择一种或更多种压缩技术，所述压缩技术随着优先化程度的增加而消耗越来越多的处理资源。

7.根据权利要求1所述的系统，其中至少部分地基于所述语义类别的所述优先化来将编码资源分配给所述帧的所述一个或更多个部分包括向编码所述视频流的编解码器提供关于所述帧的所述一个或更多个区域内的一个或更多个元素的运动的信息，其中所述编解码器使用关于所述元素的运动的信息来降低改善所述一个或更多个元素在所述视频流内的保真度。

8.根据权利要求1所述的系统，其中所述计算机可执行指令还使所述物理处理器使用所分配的编码资源对所述帧进行编码，并且实时传输具有已编码的帧的视频流。

9.根据权利要求1所述的系统，其中所述计算机可执行指令还使所述物理处理器：

识别从用于编码所述帧的所分配的编码资源产生的一个或更多个编码参数；和

将所述一个或更多个编码参数传输到接收所述视频流以解码所述帧的客户端系统。