[发明专利]视频分辨率提升方法及装置、存储介质及电子设备

权利要求书

1.一种视频分辨率提升方法，其特征在于，包括：

获取多帧图像作为输入数据，并利用第一三维卷积层对所述输入数据进行特征提取得到初始数据；

对所述初始数据进行预设倍数的下采样得到第一特征数据；

利用第二三维卷积层对所述第一特征数据进行卷积运算将所述第一特征数据合并为一帧得到第一参考数据；

对所述第一参考数据进行所述预设倍数的上采样得到第一输出数据；

对所述第一特征数据进行第N次的超分操作；

其中，所述超分操作包括下采样操作、第一次特征提取操作、合并操作、第二次特征提取操作以及上采样操作；

其中，下采样操作包括对所述第一特征数据进行所述预设倍数的下采样；

第一次特征提取操作包括对下采样后的所述第一特征数据利用第一三维卷积层进行第一次特征提取操作得到第三特征数据；

合并操作包括将所述第三特征数据利用第二三维卷积层进行卷积运算将所述第三特征数据合并为一帧得到第二参考数据；

第二次特征提取操作包括利用第一三维卷积层对所述第二参考数据以及第N+1次的输出结果的叠加数据进行第二次特征提取操作得到第四特征数据；

上采样操作包括对所述第四特征数据进行所述预设倍数的上采样得到第三输出数据；

利用所述第三输出数据更新所述第一参考数据；

其中，第N+1次的下采样操作的输入为第N次所述超分操作的所述第一次特征提取操作的输出，N为从1开始递增的正整数。

2.根据权利要求1所述的方法，其特征在于，对所述初始数据进行预设倍数的下采样得到第一特征数据，包括：

对所述初始数据进行预设倍数的下采样，并对下采样后的初始数据利用所述第一三维卷积层进行特征提取得到第一特征数据。

3.根据权利要求1所述的方法，其特征在于，所述方法还包括：

对所述初始数据利用第二三维卷积层进行卷积运算将所述初始数据合并为一帧得到第二输出数据；

将所述第二输出数据和所述第一输出数据进行叠加，并利用第一三维卷积层进行卷积运算得到目标数据；

对所述目标数据进行多倍上采样得到超分辨率图像。

4.根据权利要求1所述的方法，其特征在于，对所述第一参考数据进行所述预设倍数的上采样得到第一输出数据，包括：

对所述第一参考数据利用第一三维卷积层进行特征提取得到第二特征数据；

对所述第二特征数据进行所述预设倍数的上采样得到第一输出数据。

5.根据权利要求1所述的方法，其特征在于，利用所述第三输出数据更新所述第一参考数据，包括：

利用第N+1次上采样操作输出更新第N次上采样操作输出的所述第三输出数据；

将所述第三输出数据与所述第一参考数据叠加得到新的第一参考数据。

6.根据权利要求1所述的方法，其特征在于，所述输入数据的特征参数包括通道数，并发数量，所述图像的高和宽以及时间；

其中所述并发数量为同时输入所述输入数据的数量。

7.根据权利要求1所述的方法，其特征在于，所述预设倍数为偶数。