[发明专利]一种音视频流实时分离处理及同步的方法及其系统

摘要

本发明公开了一种音视频实时分离处理及同步的方法，包括上位机获取并解复用媒体源文件以得到视频流和音频流；上位机播放视频；对音频流进行格式转换及编码压缩后传输至下位机；下位机解码和滤波并播放音频；对视频及音频播放开始时进行初始同步处理，并对播放过程中进行同步校正处理。与现有技术相比，本发明的方法实现了音视频流的分离处理，并将音频流传输至下位机过程中减少了所占用的网络带宽，另外还确保了上位机与下位机分别播放视频、音频时的准确同步。本发明同时公开了一种音视频实时分离处理及同步的系统。

主权项

一种音视频流实时分离处理及同步的方法，其特征在于，包括：S1：上位机获取并解复用媒体源文件，以得到视频流和音频流；S2：所述上位机对所述视频流进行视频解码和视频滤波，以得到视频播放数据，并播放所述视频播放数据；S3：所述上位机对所述音频流进行格式转换及编码压缩后传输至下位机；S4：所述下位机调用解码器对所述音频流进行解码和滤波，以得到音频播放数据，并播放所述音频播放数据；S5：对所述视频播放数据及音频播放数据开始时进行初始同步处理，并对所述视频播放数据及音频播放数据播放过程中进行同步校正处理；对所述视频播放数据及音频播放数据开始时进行初始同步处理具体地包括：(21)播放所述视频播放数据的第一帧的同时，所述上位机发送视频起始帧数据包至所述下位机，所述视频起始帧数据包包括帧号m及所述视频起始帧所对应的系统时间t1；(22)所述下位机接收所述视频起始数据包后，回发音频起始帧数据包至所述上位机，所述音频起始帧数据包包括帧号及该音频起始帧所对应的系统时间t2，且该帧号与所述视频起始帧的帧号相同；(23)采用平均法统计时间差Δt＝t2‑t1的平均值Δt′；(24)判断平均值Δt′是否超过预设阈值，并根据判断结果对所述视频起始帧进行减缓帧速率处理。