[发明专利]视频物体分割方法和装置、电子设备、存储介质

权利要求书

1.一种视频物体分割方法，其特征在于，包括：

在视频的至少部分帧中，自参考帧开始顺序进行所述参考帧的物体分割结果的帧间传递，获得所述至少部分帧中各其他帧的物体分割结果；

确定所述至少部分帧中相对所述参考帧的物体分割结果丢失物体的其他帧；

以确定的其他帧作为目标帧进行丢失物体的分割，以更新所述目标帧的物体分割结果；

将所述目标帧更新后的物体分割结果顺序传递到所述视频中的至少一其他帧。

2.根据权利要求1所述的方法，其特征在于，所述参考帧包括：所述至少部分帧中的第一帧；所述自参考帧开始顺序进行所述参考帧的物体分割结果的帧间传递，包括：将所述第一帧的物体分割结果在所述至少部分帧中沿时序正方向进行帧间传递，直至所述至少部分帧中的最后一帧；或者，

所述参考帧包括：所述至少部分帧中的最后一帧；所述自参考帧开始顺序进行所述参考帧的物体分割结果的帧间传递，包括：将所述最后一帧的物体分割结果在所述至少部分帧中沿时序反方向进行帧间传递，直至所述至少部分帧中的第一帧；或者，

所述参考帧包括：所述至少部分帧中位于第一帧与最后一帧之间的中间一帧；所述自参考帧开始顺序进行所述参考帧的物体分割结果的帧间传递，包括：将所述中间一帧的物体分割结果在所述至少部分帧中分别沿时序正方向和/或时序反方向进行帧间传递，直至所述至少部分帧中的第一帧和/或最后一帧。

3.根据权利要求1所述的方法，其特征在于，所述自参考帧顺序进行所述参考帧的物体分割结果的帧间传递，获得所述至少部分帧中各其他帧的物体分割结果，包括：

根据沿所述参考帧的物体分割结果传播方向的在先帧的图像分割结果，确定所述传播方向上在后帧的物体分割结果，所述传播方向包括所述视频的时序正方向和/或时序反方向。

4.根据权利要求3所述的方法，其特征在于，所述在先帧包括：所述在后帧在所述至少部分帧中沿时序正方向或时序反方向上的相邻帧或相邻关键帧。

5.根据权利要求3所述的方法，其特征在于，根据沿所述参考帧的物体分割结果传播方向的在先帧的图像分割结果，确定所述传播方向上在后帧的物体分割结果，包括：

从所述在后帧获取包括一物体的图像块；从所述在先帧的物体类别概率图谱获取所述物体对应物体类别的概率图谱块；

至少根据所述图像块和所述概率图谱块，确定所述在后帧中所述物体的物体分割结果。

6.根据权利要求5所述的方法，其特征在于，至少根据所述图像块和所述概率图谱块，确定所述在后帧中所述物体的物体分割结果，包括：

分别将所述图像块和所述概率图谱块放大至预设尺寸；

根据分别放大后的所述图像块和所述概率图谱块，获取所述在后帧中所述物体在所述预设尺寸下的物体分割结果；

根据所述图像块和所述概率图谱块的放大比例，将所述物体在所述预设尺寸下的物体分割结果恢复为原始尺寸下的物体分割结果。

7.根据权利要求5所述的方法，其特征在于，还包括：根据所述在先帧与所述在后帧之间的光流图获取所述物体对应的光流图块；

所述至少根据所述图像块和所述概率图谱块，确定所述在后帧中所述物体的物体分割结果，包括：根据所述图像块、所述概率图谱块和所述光流图块，获取所述在后帧中所述物体的物体分割结果。

8.根据权利要求7所述的方法，其特征在于，根据所述图像块、所述概率图谱块和所述光流图块，确定所述在后帧中所述物体的物体分割结果，包括：

根据所述图像块和所述概率图谱块，获取所述在后帧中所述物体的第一物体分割结果；以及根据所述概率图谱块和所述光流图块，获取所述在后帧中所述物体的第二物体分割结果；

根据所述第一物体分割结果和所述第二物体分割结果，获取所述在后帧中所述物体的物体分割结果。