[发明专利]直播数据流处理方法、装置及电子设备

权利要求书

1.一种直播数据流处理方法，其特征在于，包括：

根据第一时间获取到的第一待播放音频帧的时间戳以及所述第一时间确定参考时间差；

根据第二时间获取到的第二待播放音频帧的时间戳以及所述第二时间确定实际时间差，其中，所述第一时间早于所述第二时间且二者间隔预设时间间隔；

若所述实际时间差与所述参考时间差之差大于预设阈值，则根据所述第二待播放音频帧的时间戳确定目标音频帧；

根据所述目标音频帧的时间戳确定目标视频帧，以使观看客户端播放由所述目标音频帧以及所述目标视频帧组成的直播数据流；

其中，所述若所述实际时间差与所述参考时间差之差大于预设阈值，则根据所述第二待播放音频帧的时间戳确定目标音频帧，包括:

判断存储有待播放音频帧的音频缓存队列中是否存在待播放音频帧；

若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中存在待播放音频帧，则执行所述根据所述第二待播放音频帧的时间戳确定目标音频帧的步骤；

若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中不存在待播放音频帧，则确定所述第二待播放音频帧为所述目标音频帧。

2.根据权利要求1所述的方法，其特征在于，所述若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中存在待播放音频帧，则执行所述根据所述第二待播放音频帧的时间戳确定目标音频帧的步骤，包括：

从所述音频缓存队列中筛选出时间戳大于所述第二待播放音频帧的时间戳的音频帧；

根据所述实际时间差与所述参考时间差之差大于预设阈值的程度高低，结合所述第二待播放音频帧的时间戳，在筛选出的音频帧中确定具有相应时间戳的音频帧为所述目标音频帧，其中，所述目标音频帧的时间戳和所述第二待播放音频帧的时间戳之差与所述程度高低存在对应关系。

3.根据权利要求2所述的方法，其特征在于，所述根据所述目标音频帧的时间戳确定目标视频帧，包括：

从存储有待播放视频帧的视频缓存队列中筛选时间戳大于或等于所述目标音频帧的时间戳的视频帧；

确定筛选出的视频帧中具有最小时间戳的视频帧为所述目标视频帧。

4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据第一时间获取到的第一待播放音频帧的时间戳以及所述第一时间确定参考时间差，包括：

对所述获取到的第一待播放音频帧的时间戳进行单位转换；

根据单位转换后的时间戳与所述第一时间确定所述参考时间差；

所述根据第二时间获取到的第二待播放音频帧的时间戳以及所述第二时间确定实际时间差，包括：

对所述获取到的第二待播放音频帧的时间戳进行单位转换；

根据单位转换后的时间戳与所述第二时间确定所述实际时间差。

5.一种直播数据流处理装置，其特征在于，包括：

时间差确定模块，用于根据第一时间获取到的第一待播放音频帧的时间戳以及所述第一时间确定参考时间差；以及，

根据第二时间获取到的第二待播放音频帧的时间戳以及所述第二时间确定实际时间差，其中，所述第一时间早于所述第二时间且二者间隔预设时间间隔；

音频帧确定模块，用于若所述实际时间差与所述参考时间差之差大于预设阈值，则根据所述第二待播放音频帧的时间戳确定目标音频帧；

视频帧确定模块，用于根据所述目标音频帧的时间戳确定目标视频帧，以使观看客户端播放由所述目标音频帧以及所述目标视频帧组成的直播数据流；

其中，所述音频帧确定模块包括：

判断单元，用于判断存储有待播放音频帧的音频缓存队列中是否存在待播放音频帧；

音频帧确定单元，用于若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中存在待播放音频帧，则执行所述根据所述第二待播放音频帧的时间戳确定目标音频帧的步骤；以及，

若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中不存在待播放音频帧，则确定所述第二待播放音频帧为所述目标音频帧。