[发明专利]音视频同步的方法、装置、电子设备及存储介质

权利要求书

1.一种音视频同步的方法，其特征在于，包括步骤：

获取编码后的音视频数据以及编码后的音视频数据的基本信息；

其中，所述基本信息包括：编码后的音视频数据中的视频数据的帧率、编码后的音视频数据中的音频数据的采样率以及编码后的音视频数据中携带的时间戳，所述时间戳由采集机器采集音视频数据时添加；

根据所述帧率得到编码后的视频帧的当前帧间间隔；

根据编码后的视频数据中携带的时间戳得到视频帧的实际需要的帧间间隔；

根据视频帧的当前帧间间隔和视频帧的实际需要的帧间间隔，判断编码后的音视频数据中的视频数据是否有丢帧；

在编码后的音视频数据中的视频数据有丢帧时，在发生丢帧的位置对编码后的音视频数据中的视频数据补入视频帧；

根据所述采样率得到编码后的音频帧的当前帧间间隔；

根据编码后的音频数据中携带的时间戳得到音频帧的实际需要的帧间间隔；

根据音频帧的当前帧间间隔和音频帧的实际需要的帧间间隔，判断编码后的音视频数据中的音频数据是否有丢帧；

在所述音频数据有丢帧时，在发生丢帧的位置对编码后的音视频数据中的音频数据补入音频帧。

2.根据权利要求1所述的音视频同步的方法，其特征在于，还包括步骤：

对编码后的音视频数据中的视频数据和编码后的音视频数据中的音频数据进行比较，得到音视频偏差；

根据所述音视频偏差，补入或丢弃视频帧和/或音频帧。

3.根据权利要求1或2所述的音视频同步的方法，其特征在于，补入的音频帧为空帧。

4.根据权利要求1或2所述的音视频同步的方法，其特征在于，补入的视频帧为补入位置的前一帧的视频帧。

5.一种音视频封装的方法，其特征在于，包括步骤：

采集原始音视频数据；

对所述原始音视频数据的视频帧添加采集时的时间戳；

对所述添加了时间戳的原始音视频数据进行编码，得到编码后的音视频数据；

对所述编码后的音视频数据分开音频通道和视频通道，分别实时封装到格式容器里面；

其中，所述对所述编码后的音视频数据分开音频通道和视频通道，分别实时封装到格式容器里面的过程中，使用如权利要求1-4任一项所述的音视频同步的方法。

6.一种音视频同步装置，其特征在于，包括：

获取模块，用于获取 编码后的音视频数据以及编码后的音视频数据的基本信息；其中，所述基本信息包括：编码后的音视频数据中的视频数据的帧率、编码后的音视频数据中的音频数据的采样率以及编码后的音视频数据中携带的时间戳，所述时间戳由采集机器采集音视频数据时添加；

判断模块，用于根据所述帧率得到编码后的视频帧的当前帧间间隔，根据编码后的视频数据中携带的时间戳得到视频帧的实际需要的帧间间隔，根据视频帧的当前帧间间隔和视频帧的实际需要的帧间间隔，判断编码后的音视频数据中的视频数据是否有丢帧，根据所述采样率得到编码后的音频帧的当前帧间间隔，根据编码后的音频数据中携带的时间戳得到音频帧的实际需要的帧间间隔，根据音频帧的当前帧间间隔和音频帧的实际需要的帧间间隔，判断编码后的音视频数据中的音频数据是否有丢帧；

补帧模块，用于在编码后的音视频数据中的视频数据有丢帧时，在发生丢帧的位置对编码后的音视频数据中的视频数据补入视频帧，在所述音频数据有丢帧时，在发生丢帧的位置对编码后的音视频数据中的音频数据补入音频帧。

7.一种音视频封装装置，其特征在于，包括：

采集单元，用于采集原始音视频数据，对所述原始音视频数据添加采集时的时间戳；

编码单元，用于对所述原始音视频数据进行编码，得到编码后的音视频数据；

封装单元，用于对所述编码后的音视频数据分开音频通道和视频通道，分别实时封装到格式容器里面；

其中，所述封装单元还包括权利要求6所述的音视频同步装置。