[发明专利]图像处理设备、处理图像的方法以及计算机可读记录介质

说明书

提供了一种图像处理设备。所述图像处理设备包括：处理器，被配置为响应于包括多个帧的图像被输入，针对每个帧将预定参数改变为与所述多个帧中的每个帧的压缩率相应的参数，并且通过使用针对每个帧而改变的参数来处理输入图像；以及输出接口，被配置为输出处理后的图像。

技术领域

本公开涉及一种图像处理设备、用于处理图像的方法以及计算机可读记录介质。更具体地，本公开涉及一种用于从可变图像质量的低质量图像产生预定等级的高质量图像的图像处理设备、用于处理图像的方法以及计算机可读记录介质。

背景技术

已经广泛地进行了研究以从通常在定量画面质量评估中使用的峰值信噪比(PSNR)、结构相似度(SSIM)等方面改善画面质量。

由于人工智能(AI)的最新发展，人工智能已被越来越多地应用于改善画面质量。然而，响应于由于运动图像传输环境(诸如，传输介质、分辨率、比特率、各种编解码器等)导致的图像质量波动，仅通过改善单个图像的固定图像质量的技术，在改善图像质量的性能方面仍然存在缺陷。

在响应于可变图像质量根据图像的质量水平应用不同的机器学习网络的情况下，存在存储器与图像质量的范围成比例地增加的问题。

为了解决此问题，需要一种在使存储器消耗量最小化的同时针对可变图像质量优化的图像质量改善技术。

以上信息仅作为背景信息被呈现以用于帮助理解本公开。至于以上信息中的任何信息是否可用作关于本公开的现有技术，尚未作出确定，并且尚未进行断言。

发明内容

技术问题

本公开的各方面将至少解决上述问题和/或缺点，并且至少提供下述优点。

技术方案

因此，本公开的一方面在于提供一种实时响应于可变图像质量而执行优化的图像质量改善处理的图像处理设备、图像处理方法和计算机可读记录介质。

根据本公开的一方面，提供了一种图像处理设备。所述图像处理设备包括：处理器，被配置为响应于包括多个帧的图像被输入，针对每个帧将预定参数改变为与所述多个帧中的每个帧的压缩率相应的参数，并且通过使用针对每个帧而改变的参数来处理输入图像；以及输出接口，被配置为输出处理后的图像。

所述图像处理设备还可包括：存储器，被配置为存储与多个预定压缩率中的每个预定压缩率相应的预定参数。如果帧的压缩率是所述多个预定压缩率中的一个预定压缩率，则处理器可使用存储的预定参数中的与压缩率相应的预定参数执行图像处理，并且如果帧的压缩率与所述多个预定压缩率不同，则处理器可通过计算新参数来执行图像处理并且将新参数存储在存储器中。

处理器可通过使用所述多个预定压缩率和所述预定参数来分析压缩率与参数之间的线性关系，并且基于分析的线性关系计算与新压缩率相应的新参数。

所述预定参数可作为对具有相同压缩率的多个帧的机器学习的结果被计算。

由处理器进行的处理图像的操作可以是针对所述多个帧的解码和图像质量改善处理中的至少一个。所述参数可以是用于解码和图像质量改善处理中的每一个的参数。

图像质量改善处理可包括获取图像的结构特征的第一处理和对获取的结构特征进行归一化的第二处理。所述参数可包括第二处理中使用的第一参数。

即使帧的压缩率被改变，在第一处理中使用的第二参数也可具有相同的值。

处理器可被配置为：通过使用所述多个帧的元数据获取所述多个帧中的每个帧的压缩率。

输出接口可包括：通信接口，用于将处理后的图像发送到外部设备。

输出接口可包括：显示器，用于显示处理后的图像。