[发明专利]一种图像优化方法、装置、设备和存储介质

说明书

本申请提供了一种图像优化方法、系统和存储介质。所述图像优化方法包括：从输入图像提取纹理品质信息，所述纹理品质信息指示所述输入图像中的纹理品质的空间分布；以及根据所述纹理品质信息，对所述输入图像中的设定区域进行纹理修复以生成纹理修复图像。

技术领域

本申请涉及图像处理领域，具体地，涉及一种图像优化方法、装置、设备和存储介质。

背景技术

目前，智能手机市场角逐激烈，而智能手机的拍照性能成为各大智能手机厂商激烈竞争的焦点之一。在此背景下，不断改善图像品质和提升用户的拍照体验成为各大智能手机厂商及其手机镜头配件供应商竞相追逐的重要目标。

细粒度的图像品质增强是当前进一步提升手机拍照性能的重要手段，例如针对人像的脸部、头发等区域以及人物着装进行专门的品质增强，针对天空、建筑、绿植等特定背景物体进行专门品质增强。

发明内容

本申请提供了一种图像优化方法，所述图像优化方法包括：从输入图像提取纹理品质信息，所述纹理品质信息指示所述输入图像中的纹理品质的空间分布；以及根据所述纹理品质信息，对所述输入图像中的设定区域进行纹理修复以生成纹理修复图像。

根据本申请实施方式，所述设定区域是所述纹理品质低于预设阈值的区域。

根据本申请实施方式，从所述输入图像提取所述纹理品质信息包括：通过第一卷积神经网络对所述输入图像进行特征提取，以获取所述纹理品质信息。

根据本申请实施方式，所述纹理品质信息可以是0到1之间的数值。

根据本申请实施方式，若所述纹理品质信息为二值化图，则对所述设定区域的边界位置进行平滑处理。

根据本申请实施方式，所述纹理修复包括：基于所述纹理品质信息，通过第二卷积神经网络对所述设定区域进行纹理修复。

根据本申请实施方式，所述纹理修复包括：按照特定权重利用所述设定区域内的纹理品质信息和所述设定区域外的纹理品质信息，对所述输入图像中的设定区域进行纹理修复。

根据本申请实施方式，所述纹理修复包括：对图像的特定像素位置进行修复操作时，对包围所述特定像素的全部周边像素按照特定权重进行卷积运算，以获得修复后的像素值。

根据本申请实施方式，所述图像优化方法还包括对所述纹理修复图像进行纹理特征增强。对所述纹理修复图像进行整体纹理特征增强是针对图像的纹理细节信息进行增强或者进一步丰富图像纹理细节信息。

根据本申请实施方式，所述纹理特征增强包括：通过使用残差网络利用所述纹理修复图像与所述残差网络输出的残差对所述纹理修复图像进行纹理特征增强。

根据本申请实施方式，所述残差网络中包含级联的、小于设定数量的卷积模块。

根据本申请实施方式，所述残差网络的任一卷积模块中包含级联的若干个扩张卷积层。

根据本申请实施方式，任一卷积模块中的至少两个扩张卷积层的扩张率不同。

本申请提供了一种图像优化装置，所述图像优化装置包括：纹理品质信息提取模块，用于从输入图像提取纹理品质信息，所述纹理品质信息指示所述输入图像中的纹理品质的空间分布；以及纹理修复模块，用于根据所述纹理品质信息，对所述输入图像中的设定区域进行纹理修复以生成纹理修复图像。

根据本申请实施方式，纹理品质信息提取模块通过第一卷积神经网络对所述输入图像进行特征提取，以获取所述纹理品质信息。

根据本申请实施方式，所述纹理品质信息可以是0到1之间的数值。

根据本申请实施方式，若所述纹理品质信息为二值化图，则所述图像优化装置还包括平滑处理模块，用于对所述设定区域的边界位置进行平滑处理。