[发明专利]特征传播方法和装置、电子设备和介质

权利要求书

1.一种特征传播方法，其特征在于，包括：

判断当前帧是否为关键帧；

响应于所述当前帧为视频中的非关键帧，根据所述当前帧相邻的前一关键帧的低层特征和所述当前帧的低层特征，由所述前一关键帧的高层特征获取所述当前帧的高层特征；其中，神经网络中，提取得到所述前一关键帧的低层特征对应的第一网络层的网络深度，浅于提取得到所述前一关键帧的高层特征对应的第二网络层的网络深度。

2.根据权利要求1所述的方法，其特征在于，所述根据所述当前帧相邻的前一关键帧的低层特征和所述当前帧的低层特征，由所述前一关键帧的高层特征获取所述当前帧的高层特征，包括：

根据相邻的前一关键帧的低层特征和所述当前帧的低层特征，获取从所述前一关键帧的低层特征变换到所述当前帧的低层特征的转换权值；

根据所述前一关键帧的高层特征和所述转换权值，将所述前一关键帧的高层特征转换为所述当前帧的高层特征。

3.根据权利要求2所述的方法，其特征在于，响应于所述当前帧为视频中的非关键帧，还包括：

至少基于所述当前帧的高层特征，对所述当前帧进行语义分割，获得所述当前帧的语义标签。

4.根据权利要求3所述的方法，其特征在于，所述至少基于所述当前帧的高层特征，对所述当前帧进行语义分割，包括：

基于所述当前帧的低层特征和高层特征，对所述当前帧进行语义分割，获得所述当前帧的语义标签。

5.根据权利要求4所述的方法，其特征在于，基于所述当前帧的低层特征和高层特征，对所述当前帧进行语义分割，包括：

对所述当前帧的低层特征进行转换，获得与所述当前帧的高层特征的通道数一致的特征；

将所述当前帧转换得到的特征与所述当前帧的高层特征进行拼接或融合，获得当前帧特征；

基于所述当前帧特征，对所述当前帧进行语义分割。

6.根据权利要求1-5任一所述的方法，其特征在于，所述判断当前帧是否为关键帧，包括：

利用关键帧调度策略判断所述当前帧是否为关键帧。

7.根据权利要求6所述的方法，其特征在于，所述利用关键帧调度策略判断所述当前帧是否为关键帧，包括：利用固定长度调度法判断所述当前帧是否为关键帧；

响应于所述当前帧为视频中的非关键帧，所述方法还包括：对所述当前帧进行特征提取，获得所述当前帧的低层特征。

8.根据权利要求6所述的方法，其特征在于，利用关键帧调度策略判断所述当前帧是否为关键帧，包括：

对所述当前帧进行特征提取，获得所述当前帧的低层特征；

根据所述前一关键帧的低层特征和所述当前帧的低层特征，获取所述当前帧被调度为关键帧的调度概率值；

根据所述当前帧的调度概率值确定所述当前帧是否被调度为关键帧。

9.根据权利要求8所述的方法，其特征在于，根据所述前一关键帧的低层特征和所述当前帧的低层特征，获取所述当前帧被调度为关键帧的调度概率值，包括：

将所述前一关键帧的低层特征和所述当前帧的低层特征进行拼接，得到拼接特征；

通过关键帧调度网络，基于所述拼接特征获取所述当前帧是否应该被调度为关键帧的调度概率值。

10.根据权利要求6所述的方法，其特征在于，还包括：

响应于当前帧为视频中的关键帧，对所述当前帧进行特征提取，获得所述当前帧的低层特征并缓存；

对所述当前帧的低层特征进行特征提取，获得所述当前帧的高层特征并缓存。

11.根据权利要求1-5任一所述的方法，其特征在于，还包括：

响应于当前帧为所述视频中的关键帧，基于所述当前帧的高层特征，对所述当前帧进行语义分割，获得所述当前帧的语义标签。