[发明专利]视频图像的处理方法及装置、电子设备和存储介质

权利要求书

1.一种视频图像的处理方法，其特征在于，包括：

针对当前时刻待复原的目标解码帧，对与所述目标解码帧相关联的参考帧进行状态估计处理，得到当前时刻的先验估计，其中，所述参考帧至少包括前一时刻的复原帧；

根据所述目标解码帧，确定所述目标解码帧的测量值，所述目标解码帧的测量值为消除了量化影响后的目标解码帧；

对所述当前时刻的先验估计及所述目标解码帧的测量值进行融合处理，得到当前时刻的复原帧；

所述方法还包括：

对所述参考帧进行矩阵变换处理，得到当前时刻的状态转换矩阵；

根据所述状态转换矩阵以及前一时刻的协方差矩阵，确定当前时刻的卡尔曼增益；

其中，所述对所述当前时刻的先验估计及所述目标解码帧的测量值进行融合处理，得到当前时刻的复原帧，包括：

根据所述当前时刻的卡尔曼增益，对所述当前时刻的先验估计及所述目标解码帧的测量值进行加权融合处理，得到当前时刻的复原帧。

2.根据权利要求1所述的方法，其特征在于，所述对与所述目标解码帧相关联的参考帧进行状态估计处理，得到当前时刻的先验估计，包括：

将所述前一时刻的复原帧输入第一状态估计网络中处理，得到当前时刻的先验估计。

3.根据权利要求1所述的方法，其特征在于，所述对所述参考帧进行矩阵变换处理，得到当前时刻的状态转换矩阵，包括：

将所述前一时刻的复原帧输入第一矩阵变换网络中，得到当前时刻的状态转换矩阵。

4.根据权利要求1或3所述的方法，其特征在于，所述参考帧还包括所述目标解码帧，

其中，所述对与所述目标解码帧相关联的参考帧进行状态估计处理，得到当前时刻对应的先验估计，包括：

将所述前一时刻的复原帧及所述目标解码帧输入第二状态估计网络中，得到当前时刻对应的先验估计。

5.根据权利要求1或2所述的方法，其特征在于，所述参考帧还包括所述目标解码帧，

其中，所述对所述参考帧进行矩阵变换处理，得到当前时刻的状态转换矩阵，包括：

将所述前一时刻的复原帧及所述目标解码帧输入第二矩阵变换网络中，得到当前时刻的状态转换矩阵。

6.根据权利要求1～3中任意一项所述的方法，其特征在于，所述根据所述目标解码帧，确定所述目标解码帧的测量值，包括：

从所述目标解码帧中获取预测残差和预测帧；

将所述目标解码帧及所述预测残差输入残差恢复网络中，得到恢复后的预测残差；

对所述恢复后的预测残差及所述预测帧进行融合处理，得到所述目标解码帧的测量值。

7.根据权利要求2所述的方法，其特征在于，所述第一状态估计网络包括第一卷积网络、第一线性整流ReLU网络、归一化网络、第一残差块网络、逆归一化网络及第二卷积网络，

其中，将所述前一时刻的复原帧输入第一状态估计网络中处理，得到当前时刻的先验估计，包括：

通过所述第一状态估计网络的第一卷积网络、第一线性整流ReLU网络、归一化网络、第一残差块网络、逆归一化网络及第二卷积网络，依次对所述前一时刻的复原帧进行处理，得到当前时刻的先验估计。

8.根据权利要求3所述的方法，其特征在于，所述第一矩阵变换网络包括：第三卷积网络、第二线性整流ReLU网络、第二残差块网络、第四卷积网络、矩阵变换网络及第一融合网络，

其中，所述将所述前一时刻的复原帧输入第一矩阵变换网络中，得到当前时刻的状态转换矩阵，包括：

通过所述第三卷积网络、第二线性整流ReLU网络、第二残差块网络、第四卷积网络、矩阵变换网络及第一融合网络，依次对所述前一时刻的复原帧进行处理，得到当前时刻的状态转换矩阵。