[发明专利]一种在线实时视频的装饰方法与系统

说明书

本发明公开了一种在线实时视频的装饰方法与系统，其中，所述方法包括：多个用户进入同一个虚拟房间后，各个用户端均从远程服务器下载该虚拟房间专用的装饰素材到本地；每个用户端通过远程服务器发送自身在线视频数据并接收其他用户端的视频数据；具有装饰权限的用户端显示装饰素材以及待装饰用户端视频，根据第一素材ID和第一位置生成装饰指令，并发送指令至待装饰用户端；待装饰用户端从本地查找相应的装饰素材并添加到实时捕获的视频帧的相应位置上，将添加装饰素材的视频数据进行编码，并通过远程服务器发送至该虚拟房间的其他用户端。本发明可以实现在线实时视频的装饰和传输，对装饰素材没有数量限制，可以进行大量素材的效果叠加。

技术领域

本发明涉及一种在线实时视频的装饰方法与系统，属于视频装饰技术领域。

背景技术

目前，流行的视频装扮系统多数都是离线、无法远程操作的视频装扮，其存在的缺点有：1、只能装扮本地视频，都是对本地录制的视频进行装饰处理，处理之后再上传到服务端，无法远程多用户互相装扮，也无法进行在线视频的实时装扮和传输，缺乏用户之间的互动和趣味性；2、装扮的场景素材和特效有数量限制，无法进行大量素材的效果叠加。

发明内容

本发明的目的在于，提供一种在线实时视频的装饰方法与系统，可以至少解决上述技术问题之一。

为解决上述技术问题，本发明采用如下的技术方案：

一种在线实时视频的装饰方法，包括以下步骤：步骤S1，多个用户进入同一个虚拟房间后，各个用户端均从远程服务器下载该虚拟房间专用的装饰素材到本地；步骤S2，每个用户端通过所述远程服务器发送自身在线视频数据并接收其他用户端的视频数据；步骤S3，具有装饰权限的用户端显示下载的装饰素材以及待装饰用户端视频；步骤S4，在具有装饰权限的用户将选择的装饰素材拖动到所述待装饰用户端视频的第一位置后，具有装饰权限的用户端根据第一素材ID和第一位置生成装饰指令，并发送所述装饰指令至待装饰用户端，其中，所述第一素材ID为选择的装饰素材的ID；步骤S5，所述待装饰用户端根据接收到的装饰指令，从本地查找相应的装饰素材并添加到实时捕获的视频帧的相应位置上；步骤S6，所述待装饰用户端将添加装饰素材的视频数据进行编码，并通过所述远程服务器实时发送至该虚拟房间的其他用户端。

前述的在线实时视频的装饰方法中，所述步骤S5具体包括：步骤S51，根据接收到的装饰指令获取第一素材ID和第一位置；步骤S52，对本地下载的所有装饰素材进行解析，得到解析信息，其中，所述解析信息包括第二素材ID、素材类型、素材显示图层和素材透明度；步骤S53，查找与所述第一素材ID相同的第二素材ID所属的装饰素材；步骤S54，根据查找到的装饰素材的素材类型，将查找到的装饰素材添加到实时捕获的视频帧的相应位置上。

前述的在线实时视频的装饰方法中，所述步骤S54具体包括：若查找到的装饰素材的素材类型为人脸装饰，则忽略所述装饰指令中的第一位置，并针对每一帧视频图像重复以下步骤进行装饰：步骤S541，进行人脸区域检测，计算出人脸的区域位置；步骤S542，进行人脸特征点检测，记录人脸的多个特征点的位置；步骤S543，根据人脸装饰的类别选择人脸上相应的两个特征点；步骤S544，使用仿射变换算法将装饰素材上的像素映射到视频图像上，并且按照素材显示图层和素材透明度将素材图片覆盖到视频图像上；和/或，若查找到的装饰素材的素材类型为场景装饰，则忽略所述装饰指令中的第一位置，按照素材显示图层和素材透明度将素材图片覆盖到视频图像上；和/或，若查找到的装饰素材的素材类型为奖品装饰，则根据第一位置、素材显示图层和素材透明度将素材图片覆盖到视频图像上。