[发明专利]在视频会议中同步推送音视频的方法

说明书

技术领域

本发明涉及音视频同步技术，特别涉及在视频会议中同步推送音视频的方法。

背景技术

随着信息技术的不断发展，网络已成为信息传播的重要手段。基于远程控制与操作互动作为一种新的交互方式，让用户不需要身临其境便可以实现相同的互动，异地的观看与操作。

桌面共享是数据共享中的一种重要应用，在网络视频会议、IM即时通讯工具等各类网络通讯系统中经常被用于文档展示、操作演示、协同办公等，是音视频、文本消息等交互方式重要且有效的补充方式。

目前大多视频会议、IM即时通讯工具等使用的屏幕共享技术是采用常见的屏幕截图、本地编码、发送屏幕数据、远端解码、远端显示的过程实现。如：宇龙计算机通信科技（深圳）有限公司的申请号为200910189480.x的专利申请中披露了：由主控端发送桌面请求命令向被控端，被控端在接收桌面共享后，将当前屏幕内容及屏幕显示更新的内容实时发送给对端，实现屏幕共享。又如：广东威创视讯科技股份有限公司的申请号为200810220423.9的专利申请中披露了：对共享线端进行鼠标信息采集、桌面图像采集、编码压缩图像、分块、打包、发送数据包至MCU、MCU向控制端和观看者端发送图像、控制端向MCU发送控制命令、MCU转发控制命令、共享线端执行响应的控制命令从而实现了屏幕的共享与远程控制。

然而，在视频会议过程中，视频图像只是共享源设备共享的一部分数据，而另一部分音频数据则无法在以上各方法中同步传播，因而现有的视频会议系统大多无法同步共享源设备的音视频信息，使得视频会议中重要且关键的音频信息丢失，降低了视频会议的效率。

目前，现有的音视频共享技术主要有以下两种：

1、通过VGA视频线将PC（这里的PC作为共享源设备）与视频会议终端的视频接口连接，从PC的屏幕分流出一路视频流信号，并将视频流信号作为视频会议终端的视频输入信号方式将视频发送到MCU（微处理器）传输到会议室中其他与会者的客户终端，从而实现了会议中的PC屏幕推送。同时使用音频线，将PC的音频输入接入视频会议终端的音频输入，将PC的输出音频作为视频会议终端音频输入发送给MCU从而转发给视频会议中的其他与会者的客户终端。

2、通过HDMI高清线将PC（这里的PC作为共享源设备）与视频会议终端连接，将PC的视频数据和音频数据传输给视频会议终端，视频会议终端将PC桌面视频流以视频会议终端视频方式发送给MCU进行转发，将音频以视频会议终端音频输入方式发送给MCU进行转发，从而实现PC视频和音频的同时转发。

以上两种音视频共享技术都存在着相应缺陷：

1、以上两种方案中均采用接口硬双流方式接入PC的音视频流，这就要求视频会议终端必须支持上述接口，为此功能专门预留接口会增加视频会议终端的成本。

2、不论是VGA视频线、音频线或是HDMI线均存在物理上的距离限制，对于一些大型的会议室来说，视频会议终端与讲台的连接可能因线本身的长短受限。

3、以上两种方案均采用视频、音频分离传输的方式，无法保证音视频的同步性问题。

4、以上两种方案均无法动态的扩展多个PC的音视频同步推送。

5、以上两种方案在更换推送的PC时，需手动重新接线，将导致会议的中断，无法保证会议的连续性。

因此，需要一种新的在视频会议中同步推送音视频的方法来解决现有的音视频共享技术存在的缺陷。

发明内容

本发明所要解决的技术问题是：针对现有的音视频共享技术存在的缺陷，提出一种新的在视频会议中同步推送音视频的方法，实现真正的音视频同步共享。

本发明解决上述技术问题所采用的技术方案是：

在视频会议中同步推送音视频的方法，应用于包括视频会议终端、共享源设备、MCU、客户终端的系统上，该方法包括以下步骤：

a.在视频会议终端上建立并启动Socket Server服务；

b.在共享源设备上创建Socket连接，通过IP网络向视频会议终端发起接入认证请求；

c.视频会议终端根据接入认证请求对共享源设备进行接入认证，在认证通过后建立与共享源设备之间的连接；

d.视频会议终端向共享源设备发送音视频共享命令，并开启媒体接收队列、解码线程、转发线程、播放线程，同时向MCU发送屏幕及音频共享命令；

e.MCU在接收到视频会议终端发送的屏幕及音频共享命令后，将该命令转发给客户终端；

f.客户终端在接收到该命令后，开启媒体接收队列、解码线程、播放线程；