[发明专利]一种多阶段渐进式图像超分辨率方法在审
| 申请号: | 202110858949.5 | 申请日: | 2021-07-28 |
| 公开(公告)号: | CN114066727A | 公开(公告)日: | 2022-02-18 |
| 发明(设计)人: | 黄德天;陈健;杨梦维;朱显丞;吴娇绿;王振严 | 申请(专利权)人: | 华侨大学 |
| 主分类号: | G06T3/40 | 分类号: | G06T3/40;G06N3/04;G06N3/08 |
| 代理公司: | 厦门市首创君合专利事务所有限公司 35204 | 代理人: | 张松亭;李艾华 |
| 地址: | 362000 福建省*** | 国省代码: | 福建;35 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 一种 阶段 渐进 图像 分辨率 方法 | ||
1.一种多阶段渐进式图像超分辨率方法,其特征在于:
S1,使用多尺度特征提取模块MSFEB提取待重建图像的特征;所述多尺度特征提取模块MSFEB包括若干相连接的基础特征提取模块BFE和一个通道注意力模块CA;所述待重建图像为低分辨率图像;
S2,基于提取到的待重建图像的特征,采用残差特征融合机制,获得第一阶段的重建图像;
S3,使用精细化模块,对第一阶段中得到的重建图像进行优化,得到精细的重建图像;
S4,构建损失函数,对第一阶段中得到的重建图像和精细的重建图像进行损失计算。
2.根据权利要求1所述的多阶段渐进式图像超分辨率方法,其特征在于,S1中,若干所述基础特征提取模块BFE分别使用由Inception构成的残差模块RIB与由感受野组成的残差模块RRFB,所述残差模块RIB和所述残差模块RRFB包括不同尺寸卷积核的多分支结构,且所述残差模块RIB设置在所述残差模块RRFB的前端;每个所述基础特征提取模块BFE与对应的跳跃连接共同组成一个子残差块以效增强上下文特征之间的关联性。
3.根据权利要求2所述的多阶段渐进式图像超分辨率方法,其特征在于,所述残差模块RIB包括三条分支,三条分支上的卷积核尺度分别为1×1、1×1和3×3及1×1和一组级联的3×3,分别对应不同的感受野,以学习更多尺度的特征,最后将来自三个不同分支的特征融合;
所述残差模块RRFB由RIB改进而成,具体地,使用一组1×3、3×1的非对称卷积结构来替代一个3×3的卷积核,同时在各个支路结构末端引入空洞卷积来调整特征的感受野,以进一步增强特征表示能力,最后将各条分支得到的特征相融合。
4.根据权利要求1所述的多阶段渐进式图像超分辨率方法,其特征在于,所述通道注意力模块CA用于根据不同的通道特征进行自适应校准,对不同通道的特征赋予不同的关注度,增强与特征相关的通道信息,并抑制无效的通道信息,以提升模型的特征表示能力。
5.根据权利要求4所述的多阶段渐进式图像超分辨率方法,其特征在于,所述通道注意力模块CA由全局平均池化层GAP、最近邻连接模块和通道特征表示层组成,其中最近邻连接模块只对邻近的k个通道进行连接;所述通道表示通过基础特征提取模块BFE提取到的特征通道;
特征y的第i个通道yi的权重wi可以通过如下公式得到:
其中,δ表示Sigmoid激活函数,表示yi对应卷积核参数,表示与yi相邻k个相邻通道特征中的第j个特征,表示yi的k个相邻通道的集合;ρ表示系数值,b表示偏置值,|·|odd表示取t的最近奇数。
6.根据权利要求1所述的多阶段渐进式图像超分辨率方法,其特征在于,S2中,基于提取到的待重建图像的特征,采用残差特征融合机制,获得第一阶段的重建图像,具体包括:
S21,使用全局特征融合模块,执行如下操作:
将由各个多尺度特征提取模块MSFEB得到的特征进行自适应融合,通过长跳跃连接结构传送至全局特征融合模块中,以利用各个上下文特征的关联性;
S22,使用全局残差学习模块,执行如下操作:
使用全局残差学习机制,自适应地学习残差特征的权重,将浅层特征与深层特征进行融合。
7.根据权利要求6所述的多阶段渐进式图像超分辨率方法,其特征在于,还包括:在所述全局特征融合模块后引入1×1的卷积层,以自适应地控制输出的特征数量。
8.根据权利要求1所述的多阶段渐进式图像超分辨率方法,其特征在于,S3中,使用精细化模块,对第一阶段中得到的重建图像进行优化,得到精细的重建图像,具体包括:
通过第一阶段中得到的重建图像的高频特征来弥补待重建图像丢失的局部细节信息,从而将第一阶段中得到的重建图像优化为精细的重建图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华侨大学,未经华侨大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110858949.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:具有模拟输出的多样传感器测量
- 下一篇:喷墨记录方法和喷墨记录装置
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





