[发明专利]视音频同步的监测方法及系统，以及视音频播出系统

说明书

本发明公开了一种视音频同步的监测方法及系统，以及视音频播出系统。所述监测方法包括：在资料准备阶段，根据视频数据的一个或多个图像帧生成水印信息，将所述水印信息嵌入到音频数据中，整合视频数据和音频数据得到视音频流；在资料准备阶段之后的传输路径上，设置多个检测点，在每个检测点截取视音频流，检测截取到的视音频流中的水印信息，如果检测到水印信息，则获得被检测到的水印信息对应的图像帧，并根据所述对应的图像帧生成新的水印信息，将被检测到的水印信息和新的水印信息比较，如果相符合，确定视音频满足同步要求，否则，确定视音频不满足同步要求。将图像帧的水印信息用于监测，能够提高监测的准确性。

技术领域

本发明涉及广播电视技术领域，具体涉及一种视音频同步的监测方法及系统，以及视音频播出系统。

背景技术

视音频同步指的是视频播出过程中视频和音频同步，也就是说播放的声音要和当前显示画面的时间偏差控制在极小范围内，在电视播出系统转播演播室信号时，比如歌唱类节目，选手的嘴型、唱词与实际的声音送达不一致，这时间差异只要人能感知，都将产生非常差的一种体验。

正常情况下，视频通过帧率(Frame Rate)描述一秒视频的帧数，音频通过采样率(Sample Rate)描述一秒音频播放的采样样本个数，这样一来，理论上可以通过简单的计算就能知道一帧和一个采样样本的播放时间，两项对应，各自控制其速率，可以互不干涉的保证同步的播放。

然而，实际情况没有那么理想。为了解决视音频同步的问题，技术上人们引入了DTS(Decode time stamp解码时间戳)、PTS(Presentation time stamp显示时间戳)、SCR(System Clock Reference系统时钟参考)和STC(System time clock系统时钟)四个参数共同处理，在编码、解码的多个环节，共同来保证其一致性。

但实际的播放、传输环节，有太多的因素，会导致产生视音频的不同步。由此，还需要进一步加强对视音频同步在播放和传输过程中的监测。

发明内容

本发明要解决的技术问题在于，提供一种改进的视音频同步的监测方法及系统，以便于更及时地发现视音频不同步的问题。

根据本发明的一方面，提供多个图像帧多个图像帧多个图像帧多个图像帧多个图像帧一种视音频同步的监测方法，包括：

在资料准备阶段，根据视频数据的一个或多个图像帧生成水印信息，将所述水印信息嵌入到音频数据中，整合视频数据和音频数据得到视音频流；

在资料准备阶段之后的传输路径上，设置多个检测点，在每个检测点截取视音频流，检测截取到的视音频流中的水印信息，如果检测到水印信息，则获得被检测到的水印信息对应的图像帧，并根据所述对应的图像帧生成新的水印信息，将被检测到的水印信息和新的水印信息比较，如果相符合，确定视音频满足同步要求，否则，确定视音频不满足同步要求。

优选地，生成水印信息包括以下步骤：

根据所述一个或多个图像帧生成图像特征值；以及

根据所述图像特征值生成相应的水印信息。

优选地，根据所述图像特征值生成一唯一数值作为所述水印信息。

优选地，所述图像特征值为颜色特征、纹理特征和形状特征其中至少一种特征构成的特征值。

优选地，所述将所述水印信息嵌入到所述音频数据中包括：

采用变换域的水印嵌入方式，进行水印嵌入。

优选地，根据同步机制获得被检测到的水印信息对应的图像帧，所述同步机制为时间戳同步机制。