[发明专利]基于虚拟世界的视频数据实时处理方法及装置、计算设备

权利要求书

1.一种基于虚拟世界的视频数据实时处理方法，其包括：

实时获取图像采集设备所拍摄和/或所录制的视频中包含特定对象的当前帧图像；或者，实时获取当前所播放的视频中包含特定对象的当前帧图像；

对当前帧图像进行场景分割处理，得到当前帧图像针对于所述特定对象的前景图像；

绘制三维场景；

从所述当前帧图像中提取出所述特定对象的关键信息，根据所述关键信息得到所述前景图像在所述三维场景中的位置信息；所述关键信息为关键点信息，所述关键点信息包括特定对象边缘的关键点信息和/或包括特定对象的特定区域的关键点信息；所述三维场景中的位置信息包括三维场景中的左右、上下和/或深度位置信息；

根据所述位置信息，将所述前景图像与所述三维场景进行融合处理，得到当前帧处理后的图像；

将当前帧处理后的图像覆盖原当前帧图像得到处理后的视频数据；

显示所述处理后的视频数据；

其中，所述从所述当前帧图像中提取出所述特定对象的关键信息，根据所述关键信息得到所述前景图像在所述三维场景中的位置信息进一步包括：

根据所述特定对象的关键点信息，计算具有对称关系的至少两个关键点之间的距离；

根据具有对称关系的至少两个关键点之间的距离，得到所述前景图像在所述三维场景中的深度位置信息。

2.根据权利要求1所述的方法，其中，所述从所述当前帧图像中提取出所述特定对象的关键信息，根据所述关键信息得到所述前景图像在所述三维场景中的位置信息进一步包括：

根据所述关键点信息，获取所述特定对象在当前帧图像中的位置信息；

根据所述特定对象在当前帧图像中的位置信息，得到所述前景图像在所述三维场景中的左右位置信息。

3.根据权利要求1-2中任一项所述的方法，其中，所述方法还包括：

获取所述三维场景的地形信息；

根据所述三维场景的地形信息、所述前景图像在所述三维场景中的左右位置信息和/或深度位置信息，得到所述前景图像在所述三维场景中的上下位置信息。

4.根据权利要求1-2中任一项所述的方法，其中，所述根据所述位置信息，将所述前景图像与所述三维场景进行融合处理，得到当前帧处理后的图像进一步包括：

根据所述前景图像在所述三维场景中的深度位置信息、左右位置信息和/或上下位置信息，将所述前景图像与所述三维场景进行融合处理，得到当前帧处理后的图像。

5.根据权利要求1-2中任一项所述的方法，其中，在所述得到当前帧处理后的图像之前，所述方法还包括：

在所述前景图像的特定对象的特定区域绘制效果贴图。

6.根据权利要求1-2中任一项所述的方法，其中，所述三维场景包含实时变化的天气信息。

7.根据权利要求1-2中任一项所述的方法，其中，所述三维场景包含可变化的光照信息。

8.根据权利要求1-2中任一项所述的方法，其中，所述显示处理后的视频数据进一步包括：将处理后的视频数据实时显示；

所述方法还包括：将处理后的视频数据上传至云服务器。

9.根据权利要求8中所述的方法，其中，所述将处理后的视频数据上传至云服务器进一步包括：

将处理后的视频数据上传至云视频平台服务器，以供云视频平台服务器在云视频平台进行展示视频数据。

10.根据权利要求8中所述的方法，其中，所述将处理后的视频数据上传至云服务器进一步包括：

将处理后的视频数据上传至云直播服务器，以供云直播服务器将视频数据实时推送给观看用户客户端。

11.根据权利要求8中所述的方法，其中，所述将处理后的视频数据上传至云服务器进一步包括：

将处理后的视频数据上传至云公众号服务器，以供云公众号服务器将视频数据推送给公众号关注客户端。