[发明专利]一种低码率视频流复合高清图解数据及其带宽分配方法

摘要

本发明涉及一种低码率视频流复合高清图解数据及其带宽分配方法，在低码率条件下，传输通过分配带宽完成，音频互动优先级最高，低码率视频流传输优先级其次，复合高清图解数据传输优先级最低，复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两路数据的同步,展现复合高清图解数据的每一帧，则通过分块、编码压缩、传输、展现，每个分块根据位置信息，在完成传输后，覆盖保持同步的低码率视频帧经过放大显示所对应的位置，使复合过程越来越清晰的还原成高清图像。本发明低带宽条件下保障语音互动和低码率视频基础上，并实现同步传输高清图解数据的方法。

主权项

一种低码率视频流复合高清图解数据及其带宽分配方法，采集模块将接收的音频数据以I2S音频解码输出，将接收的高清视频数据以YUV高清视频解码输出；处理模块将YUV高清视频解码数据，按两路压缩处理，一路处理成QCIF或CIF低码率视频，一路按照时间戳获取指定低码率视频帧对应的高清视频帧，处理成1080p高清图解数据，并通过编码标识同步特征信息，再等分成M*N块，并将每块进行压缩；音频数据和两路视频数据均发送到传输缓冲区，各自再打包成更小的有利于传输和重传的数据包，传输时音频数据优先，其次低码率视频，最后是复合高清图解数据；复合高清图解数据的每一帧，按照时间戳标识对应低码率视频流的指定帧，并从该帧开始保持两路数据的同步；在低码率条件下，传输通过分配带宽完成，音频互动带宽控制在4kbps～16kbps水平，低码率视频流传输帧率控制在25fps以下，其特征在于：复合高清图解数据传输帧率控制在0.01～1fps水平，低码率视频帧率限定在5～25fps，自适应调整过程兼顾帧率及质量来调整码流大小，动态调整通过调节低码率视频流及高清图解数据的帧率来进行，音频码流则不调整，以0.2fps为高清图解数据基准帧率，以15fps为低码率数据基准帧率，调节周期以5秒一次，具体方法如下：当检测到带宽低于基准时，如果侧重于观察高清图解数据，则首先下调低码率视频的码率，具体方法是将低码率视频流码率降低为上一次码率的60％～80％；如果侧重于观察低码率视频，则保持最低码率在15fps水平后，不再降低，此时高清图解数据，按照不限定时间要求传输，如果低于最低设计值0.01fps，则按超时处理；当检测到带宽充足时，升高码率，低码率视频每次提高为上一次码率的105％，直到25fps；如果侧重于观察高清图解数据，则首先提高高清图解数据帧率，而将低码率视频保持在较低的水平。