[发明专利]一种视频图像的处理方法及装置

说明书

技术领域

本发明涉及通信技术领域，尤其涉及一种视频图像的处理方法及装置。

背景技术

数字视频变换盒，又称为机顶盒，其基本功能是将视频码流进行解码，转换为视频图像并在电视上显示。

随着技术的发展，用户的需求也越来越多样化，扩展电视所能提供的功能，使用户能够像使用计算机一样使用电视，已经成为各服务提供商追求的目标。

由于电视的基本功能就是显示视频图像，而机顶盒的基本功能就是对视频码流进行解码，因此目前对电视所能提供的功能进行扩展的方法为：设置与机顶盒具有通信链接的服务器，通过设置的服务器扩展电视的功能。

采用上述方法扩展电视的功能时，服务器可以看作是计算机的主机，电视可以看作是计算机的显示器。具体的，服务器接收用户通过机顶盒发送的指令，并根据指令生成相应的图像，将图像返回给机顶盒，机顶盒将图像发送给电视显示。

但是，由于服务器并不能预知用户接下来将要进行什么样的操作，也即不能预知自身将接收到何种操作指令，也就不能预知当前生成的图像将会如何变化，因此，为了使电视显示的图像能够实时的反映出用户的操作，服务器需要对生成的图像进行实时的采集，采集成一帧一帧的视频图像，进而形成视频，并对采集到的每帧视频图像进行编码，形成视频码流，将视频码流发送给机顶盒。

由于机顶盒的基本功能就是对视频码流进行解码，因此上述扩展电视功能的方法只需要针对机顶盒增加向服务器发送指令的功能即可，对于服务器实时返回的视频码流，机顶盒则可以采用其基本功能对视频码流进行解码，并发送给电视显示。

一般的，对视频图像进行编码的方式有两种，第一种是实时编码的方式，第二种是预先编码的方式。

实时编码的方式适用于对视频图像的采集和播放的实时性要求较高的场景。例如，在对球赛进行实况转播时，需要使用户可以通过电视播放的视频图像获知当前正在进行的球赛的赛况，而由于无法预知后续发生的赛况，因此球赛现场的摄像机要对球赛进行实时的拍摄，也即实时的采集视频图像，并需要对采集到的视频图像立刻进行发送，实现球赛的实况转播。此时，由于球赛的视频图像是由摄像机实时采集的，而且采集到的视频图像又需要被实时的发送出去进行播放，因此对视频图像的采集和播放的实时性要求较高，需要采用实时编码的方式对采集的视频图像进行编码。

在采用实时编码的方式进行编码时，由于视频图像的采集和播放均要求较高的实时性，因此实时编码的方式要求编码速率不低于视频图像的采集速率。继续沿用上例，由于球赛的视频图像是由球赛现场的摄像机实时采集的，而为了保证视频画面的流畅度，需要采用较高的速率采集视频图像。假设采集球赛的视频图像是采用50帧/秒的速率进行采集的，也即每秒采集50帧视频图像，由于采集到的视频图像又需要被实时的发送出去进行播放，因此对采集到的视频图像进行编码的编码速率应不小于50帧/秒。

预先编码的方式适用于对视频图像的播放的实时性要求较低的场景。继续以球赛为例进行说明，假设球赛是以录播的形式播放的，则仍需要由球赛现场的摄像机对球赛的视频图像进行实时采集，但是采集到的视频图像不需要被实时的发送并播放，可以先存储采集到的视频图像，然后在后续指定的时间段进行播放。此时，由于不需要对实时采集到的视频图像进行实时的播放，因此对视频图像的播放的实时性要求较低，采用预先编码的方式对采集的视频图像进行编码。

在采用预先编码的方式进行编码时，由于对视频图像的播放要求的实时性较低，因此预先编码的方式并不要求较高的编码速率。继续沿用上例，假设采集球赛的视频图像是采用50帧/秒的速率进行采集的，但由于采集到的视频图像并不需要实时的发送并播放，可以先存储采集的视频图像，在后续指定的时间段再进行播放，因此对采集到的视频图像进行编码的编码速率可以低于50帧/秒，例如25帧/秒，甚至1帧/秒。理论上预先编码的方式可以采用任何编码速率进行编码，只要能够完成视频图像的编码即可。对球赛的视频编码完成后，在需要播放该视频时，只需要将编码后的视频图像取出，并按照50帧/秒的帧率进行播放即可。

需要说明的是，实时编码的方式与预先编码的方式相比，仅就对视频图像的编码方法而言，二者是基本相同的，不同之处就在于：实时编码的方式用于需要对实时采集的视频图像进行实时发送并播放的场景，要求较高的编码速率，而预先编码的方式用于不需要对实时采集的视频图像进行实时发送并播放的场景，可以采用较低的编码速率。