[发明专利]一种云会议中录制视频合屏的处理方法及装置有效
申请号: | 202110264122.1 | 申请日: | 2021-03-11 |
公开(公告)号: | CN112689119B | 公开(公告)日: | 2021-06-18 |
发明(设计)人: | 马华文 | 申请(专利权)人: | 全时云商务服务股份有限公司 |
主分类号: | H04N7/15 | 分类号: | H04N7/15;H04N5/265 |
代理公司: | 北京惟盛达知识产权代理事务所(普通合伙) 11855 | 代理人: | 董鸿柏 |
地址: | 100102 北京市东城区青*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 会议 录制 视频 处理 方法 装置 | ||
本发明涉及一种云会议中录制视频合屏的处理方法及装置,针对本发明云会议中录制视频合屏的处理方法来说,包括如下步骤:S1:解析录制文件,解析出控制协议,获得合屏的布局信息以及分屏的宽高;S2:将非视频的会议元素,输入到图形图片转换模块进行统一处理,经过转换后,输出成合屏模块支持的YUV数据格式;S3:将非视频的会议元素经处理后的YUV数据,给到合屏模块合屏处理;S4:将合屏处理后的数据,按照设置的合屏编码参数进行H264编码,将编码后的H264视频ES数据给到上层业务进行容器封装处理。针对本发明装置来说,其执行上述方法。本发明能保证会议中提升会议效果的多种会议元素进行快速、稳定的视频合成。
技术领域
本发明涉及一种云会议中录制视频合屏的处理方法。
本发明还涉及一种云会议中录制视频合屏的处理装置。
背景技术
随着视频云会议的快速发展,及视频会议媒介多元化,打破了时域、地域限制,随时随地都能快速进行视频会议。客户对会议录制的要求也越来越高,不仅仅需要录制存储会议中所有与会人员的视频和音频数据,还需要将一些辅助数据也能按照会议中的操作原封不动地记录下来。而这些辅助数据包括点位图形、JPEG/BMP图片、GIF动图,以及会中用户分享的视音频等,辅助数据可以用于提升会议效果和用户的直观体验。 目前,现有的视频合屏功能,分为硬件视频合屏方案和软件视频合屏方案。硬件视频合屏方案,是针对传统视频会议,将ASI等采集卡视频接入到硬混屏设备做为输入源,进行混屏编码输出的。
现有的软件视频合屏方案对输入的数据有要求,一般仅支持传输格式是TS、RTP、RTSP、RTMP、HLS等传输协议,其中负载数据都是视频格式编码后的数据。这种视频数据的输入帧率相对稳定,一般是15-25帧,合屏时相对较容易。还有一种云会议中录制方案,跳过混屏直接进行主持人显示界面截图编码,这样增加了用户端的上行带宽以及用户端性能耗费。
现有的会议视频合屏方案,不能将会议中图形、图片等会中元素按照用户操作录制下来。在录制合屏中,没有很好地解决多种输入源当帧率不同的时候,进行视频合屏会产生某些分屏快放,某些分屏不流畅等现象。
发明内容
本发明的目的是提供一种云会议中录制视频合屏的处理方法,能保证会议中提升会议效果的多种会议元素进行快速、稳定的视频合成,并极大地提升了用户进行会议回放的体验及感受。
本发明的另一个目的是提供一种云会议中录制视频合屏的处理装置,其执行上述方法。
针对本发明云会议中录制视频合屏的处理方法来说,具体包括如下步骤:
S1:解析录制文件,解析出控制协议,获得合屏的布局信息以及分屏的宽高,同时,也要解析出控制协议的操作;
S2:将非视频的会议元素,输入到图形图片转换模块进行统一处理,输入到图形图片转换模块的是点坐标数据和JPEG数据/文件或BMP数据/文件或PNG数据/文件或GIF数据/文件,经过转换后,输出成合屏模块支持的YUV数据格式;
S3:将非视频的会议元素处理后的YUV数据和H264视频ES数据,给到合屏模块进行合屏处理,YUV数据按照布局宽和高进行缩放处理;而H264视频ES数据,则需要先进行解码转换为YUV数据,解码成功后再根据布局宽和高进行缩放处理;将所有按照布局信息处理后的YUV数据,进行视频合屏处理;
S4:将合屏处理后的数据,按照设置的合屏编码参数进行H264编码,转换为H264视频ES数据,将编码成功后的H264视频ES数据给到上层业务进行容器封装处理。
作为本发明云会议中录制视频合屏的处理方法进一步的改进,解析出控制协议的操作,包括的操作信息为:插入会议元素、开启/关闭批注操作和切换合屏布局。
作为本发明云会议中录制视频合屏的处理方法进一步的改进,S2中,处理的流程为:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于全时云商务服务股份有限公司,未经全时云商务服务股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110264122.1/2.html,转载请声明来源钻瓜专利网。