[发明专利]基于流媒体技术的视频综合系统

说明书

本系统是一种基于流媒体技术的视频综合性平台，采用浏览器/服务器模式，方便实用的实时感知交流、隐私保护、文件传输、文档共享、白板等多功能的整合实现。语音处理中采用高效的回音消除、自动增益、背景降噪、静音检测技术；视频处理中采用先进的视频优化技术、带宽自适应机制、视频多码率支持、误码掩盖技术、前向纠错编码技术，使视频更流畅，更清晰。支持超大规模用户并发，多服务器交叉级联、动态网络带宽均衡等技术。

技术领域

本系统是一种基于流媒体技术的视频综合性平台，主要用于视频会议、远程协助、远程心理辅导等功能。并基于流媒体协作平台的灵活、方便的工作空间感知处理方法和保护协作者人物特征的方法，及实现具有隐私保护的远程音视频综合协作平台，具有重大的理论意义和实际应用价值。

背景技术

现有的视频会议系统大致可以分为教学型的双向视频会议系统、会议型双向视频会议系统、商务型视频会议系统(即桌面型视频会议系统)、软件视频会议系统、软件专业版高清视频会议多种类型。但其会议系统在通用技术上差别不大，效果主要受网络带宽限制和电脑配置制约。由于其技术方案原因，对于用户的软硬件要求较高，通常需配置相应的视频卡；加上未考虑到用户隐私保护，给用户带来了心理负担，不利于参与者的大胆工作。

本系统将采用基于肤色和脸部特征的视频序列中实时人脸检测与跟踪方法；采用基于PLAR(PseudoLogAreaRatio)系数曲线变换方法和基于线性预测的基音同步叠加(LP-PSOLA)算法分别对语音信号的谱参数和韵律参数进行修改。

基于以上技术方案，本系统开发的基于流媒体的视频综合平台将具有特有的技术竞争优势。基于此平台，还可以方便的构建诸如远程心理诊疗系统、咨询系统、企业商务管理系统、教学系统等应用。

发明内容

本系统基于浏览器/服务器模式架构，用户通过访问网页的形式进行视频协作，在语音处理技术中采用高效的回音消除、自动增益、背景降噪、静音检测，带来比电话还清晰、接近CD播放音质的语音通话效果；并采用先进的视频编码技术，以及视频优化技术、先进的带宽自适应机制、视频多码率支持、误码掩盖技术、前向纠错编码技术，使视频更流畅，更清晰。基于矢量成像技术的文档共享使得文档大小缩放不失真；其结构组成：

(1)基于Web的流媒体协作管理子系统包括基于Web的协作会议的组织、协作会议的控制、会议安全管理、访问权限管理等关键技术，同时开发相关模块，从而构成基于Web的流媒体协作管理子系统。

(2)高效的流媒体与共享文档的传输方式

实时协作系统中必须保证音视频信息的高效、实时采集、处理和传输，研究开发包括多路视频、多人混音、屏幕广播、实时录制、点播等技术和功能的实现方法。

(3)研究灵活的多模式交互方式

集音频、视频、文档、文字、邮件、短信等多种模式的协作交互方式，以保证在音视频会议的同时能方便地实现电子白板、资料共享、协同浏览、远程辅导、网页同步、文字讨论、系统消息、程序共享等功能。

(4)视频信息隐私保护处理方法

视频信息隐私保护处理方法，该方法可根据协作用户的不同要求，在视频图像序列中始终检测跟踪待保护的隐私区域，并对此区域进行模糊化处理以隐藏用户个人生物特征。

(5)音频信息隐私保护处理方法

音频信息隐私保护处理方法，该方法在进行语音交流时，可根据协作用户的要求，实时改变说话人语音、语调，从而能隐藏说话人身份。

(6)基于流媒体的协作综合平台的集成开发

在各个子功能模块设计实现的基础上，利用基于浏览器/服务器模式的方法架构实现整个系统，从而构建基于流媒体的协作综合平台。

系统技术路线描述：