[发明专利]图像处理方法和装置

权利要求书

1.一种图像处理方法，包括：

使用第一卷积神经网络提取输入的第一图像的特征，其中，所述第一卷积神经网络包括依次连接的多个第一卷积层和间插于相邻第一卷积层之间的多个第一池化层，所述第一卷积层每个用于产生并输出第一卷积特征；

使用第二卷积神经网络重构并输出图像，其中，第二卷积神经网络包括依次连接的多个第二卷积层和间插于相邻第二卷积层之间的多个复合层，所述复合层为上采样层；

其中，所述第一卷积层的数量与所述第二卷积层的数量相等，最后的第一卷积层的输出被连接到最初的第二卷积层，且所述多个第二卷积层中除最初的层级外，至少之一接收对应的所述第一卷积层输出的第一卷积特征，且融合同一层级的复合层的输出以及对应的所述第一卷积层输出的第一卷积特征以得到其输出数据。

2.根据权利要求1的图像处理方法，其中，所述多个第二卷积层中除最初的层级外，每个都接收对应的所述第一卷积层输出的第一卷积特征，且融合同一层级的复合层的输出以及对应的所述第一卷积层输出的第一卷积特征以得到其输出数据。

3.根据权利要求1的图像处理方法，其中，所述复合层每个获取被输入到其中的第一数量的输入图像并将这些输入图像的像素值交织以产生所述第一数量的输出图像。

4.根据权利要求1-3任一的图像处理方法，还包括：

使用第三卷积神经网络提取输入的第三图像的特征，其中，所述第三卷积神经网络包括依次连接的多个第三卷积层和间插于相邻第三卷积层之间的多个第三池化层，每个所述第三卷积层用于产生并输出第三卷积特征，所述第三卷积层的数量与所述第一卷积层的数量相等，并且

所述多个第二卷积层中除最初的层级以及连接到所述第一卷积层的层级外，至少之一接收对应的所述第三卷积层输出的第三卷积特征，且融合其同一层级的复合层的输出以及对应的所述第三卷积层输出的第三卷积特征以得到其输出数据。

5.根据权利要求4的图像处理方法，还包括：

对于所述多个第二卷积层中至少之一，选择使其接收对应的所述第一卷积层或对应的所述第三卷积层的输出，由此选择对应的所述第一卷积层输出的第一卷积特征或对应的所述第三卷积层输出的第三卷积特征与同一层级的复合层的输出融合以得到其输出数据。

6.根据权利要求4的图像处理方法，还包括：

对于所述多个第二卷积层中每个，都选择使其接收对应的所述第一卷积层或对应的所述第三卷积层的输出，由此选择对应的所述第一卷积层输出的第一卷积特征或对应的所述第三卷积层输出的第三卷积特征与同一层级的复合层的输出融合以得到其输出数据。

7.根据权利要求5或6的图像处理方法，所述第一卷积特征是内容特征，所述第三卷积特征是风格特征；或者，所述第一卷积特征是风格特征，所述第三卷积特征是内容特征。

8.根据权利要求4的图像处理方法，其中，所述第一卷积神经网络和所述第三卷积神经网络的构造相同。

9.一种图像处理装置，包括：

第一卷积神经网络模块，用于提取输入的第一图像的特征，其中，所述第一卷积神经网络包括依次连接的多个第一卷积层和间插于相邻第一卷积层之间的多个第一池化层，所述第一卷积层每个用于产生并输出第一卷积特征；

第二卷积神经网络模块，用于重构并输出图像，其中，所述第二卷积 神经网络包括依次连接的多个第二卷积层和间插于相邻第二卷积层之间的多个复合层，所述复合层为上采样层；并且，

所述第一卷积层的数量与所述第二卷积层的数量相等，最后的第一卷积层的输出被连接到最初的第二卷积层，且所述多个第二卷积层中除最初的层级外，至少之一接收对应的所述第一卷积层输出的第一卷积特征，且融合同一层级的复合层的输出以及对应的所述第一卷积层输出的第一卷积特征以得到其输出数据。