[发明专利]一种云会议中实时合屏布局平滑切换的方法和装置

说明书

本发明涉及一种云会议中实时合屏布局平滑切换的方法和装置，根据当前的合屏布局样式，获取其中一个输入源对应的布局信息，提取对应的布局视频队列中的一帧视频，判断是否为有效视频；如果是则将所述的一帧视频合屏到对应的布局信息中；如果否则提取对应的布局视频队列中的上一帧有效视频，将所述上一帧有效视频合屏到对应的布局信息中；获取其他输入源对应的布局信息，重复上述步骤，得到当前合屏布局样式的有效合屏数据，并放入到合屏缓冲区中。通过采用输入解码缓冲机制，避免分屏视频卡顿的现象；采用双缓冲合屏机制，在没有产生有效合屏时使用上一帧有效视频进行输出，避免黑屏、闪屏等问题，提高用户视屏会议的使用体验。

技术领域

本发明属于视频会议技术领域，更具体地，涉及一种云会议中实时合屏布局平滑切换的方法和装置。

背景技术

随着视频云会议的快速发展，及视频会议媒介多元化，打破了时域、地域限制，随时随地都能快速进行视频会议，客户使用开会的设备也多种多样，PC、手机、盒子，商业客户还有传统硬件视频会议终端。为了能将第三方视频会议设备接入到云会议中，需要将依赖端显示布局方案，改成视频软MCU服务器进行实时视频合屏来达到会议同步显示的效果，从而帮助客户解决了第三方视频会议设备无法同步显示会议的问题。因此，就需要云会议中支持实时视频合屏，来满足并支持更多的云会议扩展要求。

目前的实时视频合屏布局切换平滑显示的方案，通常采用业务消息规避处理，这种方案是从源头规避了布局切换频繁或太快的情况，直接进行丢弃新布局的方式，或者进行固定时长处理，比如两种布局间隔需大于2秒，那么用户在设置切换新布局时，会出现设置的新布局无效或长时间没反应，这样使得用户在云会议中的体验很差。同时，在用户操作点击多次相同布局切换消息时，容易出现合屏视频闪屏、黑屏、重影等问题，合屏布局切换平滑显示的效果并不好。

发明内容

因此，本发明要解决的技术问题在于克服现有技术中的上述技术缺陷，从而提供一种云会议中实时合屏布局平滑切换的方法和装置，具体实现方案如下。

第一方面，本发明提供一种云会议中实时合屏布局平滑切换的方法，包括：

步骤1：获取所有输入源的视频数据的解码数据，并存储到对应的布局视频队列中；

步骤2：根据当前的合屏布局样式，获取一个输入源对应的布局信息；

步骤3：提取对应的布局视频队列中的一帧视频，判断是否为有效视频；

步骤4：如果是，则将所述的一帧视频合屏到对应的布局信息中；如果否，则提取对应的布局视频队列中的上一帧有效视频，将所述上一帧有效视频合屏到对应的布局信息中；

步骤5：获取其他输入源对应的布局信息，重复上述步骤3-4，得到当前合屏布局样式的有效合屏数据。

进一步的，所述判断是否为有效视频包括：

判断所提取的视频是否满足宽和高不为0且视频有数据；

如果满足，则为有效视频；否则不是有效视频。

进一步的，还包括：将所述的有效合屏数据放入到合屏缓冲区中，将所述的有效合屏数据从合屏缓冲区复制到编码输出缓冲区中，进行编码输出。

进一步的，所述的获取所有输入源的视频数据的解码数据，并存储到对应的布局视频队列中，具体为：

对每个输入源创建解码缓冲队列；

将不同输入源的视频数据推入到对应的解码缓冲队列中进行解码，获得不同输入源的解码数据；

将不同输入源的解码数据存储到对应的布局视频队列中。

进一步的，所述的将不同输入源的视频数据推入到对应的解码缓冲队列中包括：