[发明专利]直播数据流处理方法、装置及电子设备

说明书

本发明实施例提供一种直播数据流处理方法、装置及电子设备，该方法包括：根据在第一时间获取到的第一待播放音频帧的时间戳以及第一时间确定参考时间差。再根据第二时间获取到的第二待播放音频帧的时间戳以及第二时间确定实际时间差。若实际时间差与参考时间差之差大于预设阈值，则根据第二待播放音频帧的时间戳确定目标音频帧，再根据目标音频帧的时间戳确定目标视频帧，使观看客户端播放由此目标音频帧与目标视频帧组成的直播数据流。通过上述描述可知，本发明的方法实际为：当直播数据流存在延迟时，通过对直播数据流中音频帧和视频帧的丢弃来达到改善直播数据流延迟的效果，使观看用户看到实时的直播数据流，提高观看用户与主播互动的及时性。

技术领域

本发明涉及视频直播技术领域，尤其涉及一种直播数据流处理方法、装置及电子设备。

背景技术

近年来，人们通过通信设备可以获得越来越多样化的娱乐方式，如微博、手机游戏、网络视频直播等，其中网络视频直播由于其直观、内容丰富、受众可划分等特点，发展地尤为迅速。

现有技术中，主播客户端会先将直播数据流发送至内容分发网络(ContentDelivery Network，简称CDN)节点，观看客户端再通过CDN节点拉取直播数据流也即是实现了观看直播。但是，由于观看客户端与CDN节点之间的网络环境往往不稳定，网络的不稳定会使观看用户看到存在延迟的直播数据流，从而最终导致观看用户不能与主播进行及时互动，降低用户的使用体验。

发明内容

有鉴于此，本发明实施例提供一种直播数据流处理方法、装置及电子设备，用以改善直播数据流的延迟问题。

本发明实施例提供一种直播数据流处理方法，包括：

根据第一时间获取到的第一待播放音频帧的时间戳以及所述第一时间确定参考时间差；

根据第二时间获取到的第二待播放音频帧的时间戳以及所述第二时间确定实际时间差，其中，所述第一时间早于所述第二时间且二者间隔预设时间间隔；

若所述实际时间差与所述参考时间差之差大于预设阈值，则根据所述第二待播放音频帧的时间戳确定目标音频帧；

根据所述目标音频帧的时间戳确定目标视频帧，以使观看客户端播放由所述目标音频帧以及所述目标视频帧组成的直播数据流。

可选地，所述若所述实际时间差与所述参考时间差之差大于预设阈值，则根据所述第二待播放音频帧的时间戳确定目标音频帧，包括:

判断存储有待播放音频帧的音频缓存队列中是否存在待播放音频帧；

若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中存在待播放音频帧，则执行所述根据所述第二待播放音频帧的时间戳确定目标音频帧的步骤；

若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中不存在待播放音频帧，则确定所述第二待播放音频帧为所述目标音频帧。

可选地，所述若所述实际时间差与所述参考时间差之差大于预设阈值且所述音频缓存队列中存在待播放音频帧，则执行所述根据所述第二待播放音频帧的时间戳确定目标音频帧的步骤，包括：

从所述音频缓存队列中筛选出时间戳大于所述第二待播放音频帧的时间戳的音频帧；

根据所述实际时间差与所述参考时间差之差大于预设阈值的程度高低，结合所述第二待播放音频帧的时间戳，在筛选出的音频帧中确定具有相应时间戳的音频帧为所述目标音频帧，其中，所述目标音频帧的时间戳和所述第二待播放音频帧的时间戳之差与所述程度高低存在对应关系。

可选地，所述根据所述目标音频帧的时间戳确定目标视频帧，包括：

从存储有待播放视频帧的视频缓存队列中筛选时间戳大于或等于所述目标音频帧的时间戳的视频帧；