[发明专利]实时视频处理方法、装置、电子设备及存储介质

权利要求书

1.一种实时视频处理方法，其特征在于，所述方法包括：

获取实时视频信息和预设背景，所述实时视频信息是摄像头拍摄人物得到的；

针对所述实时视频信息的每一帧实时图像，从所述实时图像中获取人物轮廓区域，以及根据所述实时图像获取手势信息；

从所述实时图像中获取所述人物轮廓区域对应的部分图像，记为人物部分；

将所述人物部分显示在所述预设背景中；

基于所述手势信息生成控制指令或者不执行任何操作，所述控制指令用于控制以下至少一种操作：所述预设背景的播放操作；所述人物部分在所述预设背景中的移动操作；所述人物部分在所述预设背景中的缩放操作。

2.根据权利要求1所述的实时视频处理方法，其特征在于，所述根据所述实时图像获取手势信息，包括：

将所述实时图像输入目标检测模型，得到所述手势信息；或者，

将所述人物部分输入所述目标检测模型，得到所述手势信息。

3.根据权利要求1所述的实时视频处理方法，其特征在于，所述手势信息包括左手手势信息和右手手势信息，所述控制指令包括第一类控制指令和第二类控制指令，所述第一类控制指令用于控制所述预设背景的播放操作，所述第二类控制指令用于控制所述人物部分在所述预设背景中的移动操作和缩放操作；

所述基于所述手势信息生成控制指令，包括：

基于所述左手手势信息生成所述第一类控制指令，基于所述右手手势信息生成所述第二类控制指令；或者，

基于所述右手手势信息生成所述第一类控制指令，基于所述左手手势信息生成所述第二类控制指令。

4.根据权利要求1所述的实时视频处理方法，其特征在于，所述基于所述手势信息生成控制指令，包括：

接收用户的自定义操作；

基于所述自定义操作，确定所述手势信息与所述控制指令之间的对应关系，且使每种手势信息对应至多一种控制指令。

5.根据权利要求1所述的实时视频处理方法，其特征在于，所述方法还包括：

对所述实时图像进行风格化处理，得到风格化图像；

所述从所述实时图像中获取所述人物轮廓区域对应的部分图像，记为人物部分，包括：

从所述风格化图像中获取所述人物轮廓区域对应的部分图像，作为所述人物部分。

6.根据权利要求5所述的实时视频处理方法，其特征在于，针对所述实时视频信息的每一帧实时图像，同时执行以下处理：

从所述实时图像中获取所述人物轮廓区域；

根据所述实时图像获取所述手势信息；

对所述实时图像进行风格化处理，得到所述风格化图像。

7.根据权利要求1所述的实时视频处理方法，其特征在于，每种手势信息用于指示以下任意一种手势类型：非控制手势、握拳、比耶、比OK、伸食指、食指向上、食指向下、食指向左、食指向右、大拇指与食指张开以及大拇指与食指合并；

所述预设背景包括以下至少一种：视频素材、图片素材、文档素材和所述实时图像自身。

8.一种实时视频处理装置，其特征在于，所述实时视频处理装置包括：

数据获取模块，用于获取实时视频信息和预设背景，所述实时视频信息是摄像头拍摄人物得到的；

图像处理模块，用于针对所述实时视频信息的每一帧实时图像，从所述实时图像中获取人物轮廓区域，以及根据所述实时图像获取手势信息；

人物获取模块，用于从所述实时图像中获取所述人物轮廓区域对应的部分图像，记为人物部分；

显示控制模块，用于将所述人物部分显示在所述预设背景中；

交互控制模块，用于基于所述手势信息生成控制指令或者不执行任何操作，所述控制指令用于控制以下至少一种操作：所述预设背景的播放操作；所述人物部分在所述预设背景中的移动操作；所述人物部分在所述预设背景中的缩放操作。