[发明专利]图像处理、图像处理网络训练方法、装置、设备及介质

权利要求书

1.一种图像处理方法，其特征在于，所述方法包括：

根据图像序列中至少两个图像的顺序，获取所述图像序列的时序特征；

根据所述图像序列中所述至少两个图像之间像素的位置变化，获取所述图像序列的空间特征；

基于所述图像序列的所述时序特征和所述空间特征，进行图像重构，得到目标图像，所述目标图像中融合有所述图像序列中所述至少两个图像的内容。

2.根据权利要求1所述的方法，其特征在于，所述根据所述图像序列中所述至少两个图像之间像素的位置变化，获取所述图像序列的空间特征，包括：

对所述图像序列中第一图像和第二图像进行下采样，得到所述第一图像和所述第二图像的特征，所述第一图像为所述图像序列中的一个图像，所述第二图像为所述图像序列中除所述第一图像之外的图像；

对所述第一图像和第二图像的特征进行卷积处理，得到所述第二图像中像素相对于所述第一图像中对应像素的位移；

基于所述图像序列中所述第一图像和所述第二图像的特征，以及所述第二图像中像素相对于所述第一图像中对应像素的位移，对所述第二图像和所述第一图像中像素进行对齐，得到所述图像序列的空间特征。

3.根据权利要求2所述的方法，其特征在于，所述对所述第一图像和第二图像的特征进行卷积处理，得到所述第二图像中像素相对于所述第一图像中对应像素的位移，包括：

对所述第一图像和所述第二图像的特征进行连接，得到第一特征；

对所述第一特征进行卷积处理，得到所述第二图像中像素相对于所述第一图像中对应像素的位移；

所述基于所述图像序列中所述第一图像和所述第二图像的特征，以及所述第二图像中像素相对于所述第一图像中对应像素的位移，对所述第二图像和所述第一图像中像素进行对齐，得到所述图像序列的空间特征，包括：

对所述第一图像和所述第二图像的特征，以及所述第二图像中像素相对于所述第一图像中对应像素的位移进行可形变卷积处理，得到所述第二图像的空间特征；

将所述第一图像的特征作为所述第一图像的空间特征。

4.根据权利要求3所述的方法，其特征在于，所述对所述第一图像和第二图像的特征进行卷积处理，得到所述第二图像中像素相对于所述第一图像中对应像素的位移；基于所述图像序列中所述第一图像和所述第二图像的特征，以及所述第二图像中像素相对于所述第一图像中对应像素的位移，对所述第二图像和所述第一图像中像素进行对齐，得到所述图像序列的空间特征，包括：

基于过滤级联可形变卷积网络，对所述第一图像和所述第二图像的特征进行处理，得到所述图像序列的空间特征。

5.根据权利要求4所述的方法，其特征在于，所述过滤级联可形变卷积网络包括级联的至少两层可形变卷积网络；

所述基于过滤级联可形变卷积网络，对所述第一图像和所述第二图像的特征进行处理，得到所述图像序列的空间特征，包括：

将所述第一图像和所述第二图像的特征输入一层可形变卷积网络中，由所述可形变卷积网络对输入的特征进行处理，得到第二特征；

对所述第一图像和所述第二图像的特征进行去噪处理，将去噪处理后的特征输入其他层可形变卷积网络，由所述其他层可形变卷积网络对输入的特征进行处理，得到第三特征；

基于所述第二特征和所述第三特征，获取所述第二图像的空间特征；

将所述第一图像的特征作为所述第一图像的空间特征。

6.根据权利要求2所述的方法，其特征在于，所述对所述第一图像和第二图像的特征进行卷积处理，得到所述第二图像中像素相对于所述第一图像中对应像素的位移；基于所述图像序列中所述第一图像和所述第二图像的特征，以及所述第二图像中像素相对于所述第一图像中对应像素的位移，对所述第二图像和所述第一图像中像素进行对齐，得到所述图像序列的空间特征，包括：

基于光流估计网络，对所述第一图像和所述第二图像的特征进行处理，得到所述图像序列的空间特征。