[发明专利]分辨率的调整方法、装置、电子设备及存储介质在审
申请号: | 202111186827.2 | 申请日: | 2021-10-12 |
公开(公告)号: | CN113837980A | 公开(公告)日: | 2021-12-24 |
发明(设计)人: | 赵娟萍 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
主分类号: | G06T5/50 | 分类号: | G06T5/50;G06T3/40 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 李文静 |
地址: | 523860 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分辨率 调整 方法 装置 电子设备 存储 介质 | ||
本申请涉及一种分辨率的调整方法、装置、电子设备及存储介质,属于终端技术领域。该方法包括:将待处理的图像输入图像超分辨率模型,该图像超分辨率模型包括时域特征提取网络、频域特征提取网络和特征融合网络;通过该时域特征提取网络,确定该图像的时域特征图;基于该频域特征提取网络,确定该图像的频域特征图;基于该特征融合网络,将该时域特征图和该频域特征图的图像特征加权融合,得到该图像对应的目标图像,该目标图像的分辨率大于该图像。通过本方案,在确定目标图像时,能够结合待处理的图像的时域特征和频域特征,进而提高了目标图像的质量。
技术领域
本申请实施例涉及终端技术领域,特别涉及一种分辨率的调整方法、装置、电子设备及存储介质。
背景技术
图像超分辨率(Super Resolution,SR)技术能够通过提高图像的分辨率使模糊图像变清晰,在游戏、电影、相机、医疗影像等领域都有广泛的应用。一般通过变焦来提高图像的分辨率。其中,变焦方式包括光学变焦和数码变焦。光学变焦指通过调整镜头的焦距等相机参数来变焦;数码变焦指通过图像处理算法来对图像进行调整,以实现模拟光学变焦的目的。
相关技术中,数码变焦通过训练的神经网络模型实现。通过神经网络模型针对时域特征进行下采样和上采样,得到多个特征图,通过像素重置(PixelShuffle)算法,将多个特征图映射为一个高分辨率的图像。
发明内容
本申请实施例提供了一种分辨率的调整方法、装置、电子设备及存储介质,能够提高超分辨率图像的质量。所述技术方案如下:
一方面,提供了一种分辨率的调整方法,所述方法包括:
将待处理的图像输入图像超分辨率模型,所述图像超分辨率模型包括时域特征提取网络、频域特征提取网络和特征融合网络;
通过所述时域特征提取网络,确定所述图像的时域特征图;
基于所述频域特征提取网络,确定所述图像的频域特征图;
基于所述特征融合网络,将所述时域特征图和所述频域特征图的图像特征加权融合,得到所述图像对应的目标图像,所述目标图像的分辨率大于所述图像。
另一方面,提供了一种分辨率的调整装置,所述装置包括:
输入模块,用于将待处理的图像输入图像超分辨率模型,所述图像超分辨率模型包括时域特征提取网络、频域特征提取网络和特征融合网络;
第一确定模块,用于通过所述时域特征提取网络,确定所述图像的时域特征图;
第一确定模块,用于基于所述频域特征提取网络,确定所述图像的频域特征图;
融合模块,用于基于所述特征融合网络,将所述时域特征图和所述频域特征图的图像特征加权融合,得到所述图像对应的目标图像,所述目标图像的分辨率大于所述图像。
另一方面,提供了一种电子设备,所述电子设备包括处理器和存储器;所述存储器存储有至少一条程序代码,所述至少一条程序代码用于被所述处理器执行以实现如上述方面所述的分辨率的调整方法。
另一方面,提供了一种计算机可读存储介质,所述存储介质存储有至少一条程序代码,所述至少一条程序代码用于被处理器执行以实现如上述方面所述的分辨率的调整方法。
另一方面,还提供了一种计算机程序产品,该计算机程序产品存储有至少一条程序代码,所述至少一条程序代码由处理器加载并执行以实现上述方面所述的分辨率的调整方法。
在本申请实施例中,通过将时域特征提取网络和频域特征提取网络构建到同一图像超分辨率模型中,使得图像超分辨率模型能够提取待处理的图像的时域特征图和频域特征图,进而将时域特征图和频域特征图加权融合,得到目标图像,使得在确定目标图像时,能够结合待处理的图像的时域特征和频域特征,进而提高了目标图像的质量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111186827.2/2.html,转载请声明来源钻瓜专利网。