[发明专利]一种已知背景先验信息的视频分割方法、终端和存储介质

权利要求书

1.一种已知背景先验信息的视频分割方法，其特征在于，将视频当前帧与背景先验信息匹配，预测得到当前帧的完整背景，再对当前帧的目标前景进行分割，包括以下步骤：

(1)设定背景帧，并对背景帧进行保存；

(2)提取视频流的当前帧；

(3)判断当前帧与所述的背景帧是否匹配，若不匹配则进入步骤(4)，否则进入步骤(5)；

(4)通过修正的方式将所述的背景帧匹配到所述当前帧的背景上；具体为：使用关键点匹配算法分别对预存的背景帧以及当前帧进行关键点提取以及匹配，并选取其中部分匹配良好的关键点，计算出变换矩阵，将预存的背景帧中对应的背景部分切割出来，使用所述变换矩阵变换到与所述当前帧相同的视觉角度，并作为当前帧的新的背景输入；

(5)对当前帧进行分割得到当前帧的前景；具体为：将预存的背景帧输入编码模型得到背景特征图；将当前帧输入至所述编码模型进行特征分解得到当前帧特征图；将所述当前帧特征图与所述背景特征图进行融合，并通过解码模型对融合后的特征图进行特征解码，输出alpha遮罩图；基于所述alpha遮罩图对当前帧进行分割得到当前帧的前景。

2.根据权利要求1所述的视频分割方法，其特征在于，所述步骤(1)中的背景帧为全景图片，所述全景图片通过多张不同角度的图片合成得到。

3.根据权利要求1所述的视频分割方法，其特征在于，所述步骤(3)具体为：计算当前帧和背景帧的分割掩膜区域以外区域的相似度，如果所述相似度低于阈值时，则进入步骤(4)，否则进入步骤(5)。

4.一种已知背景先验信息的视频分割方法，其特征在于，将视频当前帧与背景先验信息匹配，预测得到当前帧的完整背景，再对当前帧的目标前景进行分割，包括以下步骤：

(1)设定背景帧，并对背景帧进行保存；

(2)提取视频流的当前帧；

(3)判断当前帧与所述的背景帧是否匹配，若不匹配则进入步骤(4)，否则进入步骤(5)；

(4)通过修正的方式将所述的背景帧匹配到所述当前帧的背景上；具体为：将预存的背景帧和当前帧输入卷积神经网络，所述卷积神经网络的输出为一系列空间变换关系映射图，然后将所述预存的背景帧中对应的背景部分切割出来并使用所述空间变换关系映射图变换到与当前帧相同的视觉角度，并作为当前帧的新的背景输入；

(5)对当前帧进行分割得到当前帧的前景；具体为：将预存的背景帧输入编码模型得到背景特征图；将当前帧输入至所述编码模型进行特征分解得到当前帧特征图；将所述当前帧特征图与所述背景特征图进行融合，并通过解码模型对融合后的特征图进行特征解码，输出alpha遮罩图；基于所述alpha遮罩图对当前帧进行分割得到当前帧的前景。

5.根据权利要求4所述的视频分割方法，其特征在于，所述步骤(1)中的背景帧为全景图片，所述全景图片通过多张不同角度的图片合成得到。

6.根据权利要求4所述的视频分割方法，其特征在于，所述步骤(3)具体为：计算当前帧和背景帧的分割掩膜区域以外区域的相似度，如果所述相似度低于阈值时，则进入步骤(4)，否则进入步骤(5)。

7.一种终端，其特征在于，包括存储器和处理器，所述存储器上存储有可在所述处理器上运行的视频处理程序，所述视频处理程序被所述处理器执行时实现如权利要求1-6中任一所述的视频分割方法的步骤。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有视频处理程序，所述视频处理程序被处理器执行时实现如权利要求1-6中任一所述的视频分割方法的步骤。