[发明专利]一种图像的超分辨率重建方法及系统在审
申请号: | 202010051767.2 | 申请日: | 2020-01-17 |
公开(公告)号: | CN111461973A | 公开(公告)日: | 2020-07-28 |
发明(设计)人: | 陶文兵;陈中雨 | 申请(专利权)人: | 华中科技大学 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06K9/62;G06N3/08 |
代理公司: | 华中科技大学专利中心 42201 | 代理人: | 李智 |
地址: | 430074 湖北*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 分辨率 重建 方法 系统 | ||
1.一种图像的超分辨率重建方法,其特征在于,包括以下步骤:
S1、对待处理的低分辨率图像进行分块,得到多个图像块;
S2、基于图像的通道注意力机制和位置注意力机制,在不同深度上提取各图像块的特征,得到各图像块对应的不同深度的特征图;
S3、对各图像块对应的不同深度的特征图进行融合,根据图像超分倍数,对所得融合后的特征图进行图像重建,得到各超分辨率图像块;
S4、将所得的各超分辨率图像块进行重组,得到高分辨率图像。
2.根据权利要求1所述的图像的超分辨率重建方法,其特征在于,所述S2包括以下步骤:
S21、采用卷积神经网络提取图像块的浅层特征,得到浅层特征图;
S22、采用已训练好的深层特征提取网络,分别在不同深度上提取浅层特征图的通道注意力特征和位置注意力特征,将二者进行融合,得到图像块对应的不同深度的特征图;
其中,所述深层特征提取网络包括N个级联的基于注意力模型的双注意力卷积神经网络,与N个深度一一对应,N为大于等于2的正整数。
3.根据权利要求2所述的图像的超分辨率重建方法,其特征在于,所述双注意力卷积神经网络包括通道注意力模型、位置注意力模型和融合层;
所述通道注意力模型的输出端与所述融合层的输入端相连,所述位置注意力模型的输出端与所述融合层的输入端相连;
所述通道注意力模型用于基于通道注意力机制,通过计算输入特征图各通道的像素平均值,得到通道注意力初始权重,对其进行调整后,与输入特征图进行点乘,得到输入特征图的通道注意力特征;
所述位置注意力模型用于基于位置注意力机制,通过在输入特征图各像素位置点处计算各通道像素的平均值,得到位置注意力初始权重,对其进行调整后,与输入特征图进行点乘,得到输入特征图的位置注意力特征;
所述融合层用于将所得通道注意力特征和位置注意力特征进行融合。
4.根据权利要求3所述的图像的超分辨率重建方法,其特征在于,第c个通道的通道注意力初始权重为:
其中,c=1,2,…,L,L为输入特征图X的通道数,H为输入特征图X的高,W为输入特征图X的宽,Xc(i,j)为输入特征图X第c个通道上第i行第j列的特征值。
5.根据权利要求3所述的图像的超分辨率重建方法,其特征在于,第i行第j列的位置注意力初始权重为:
其中,i=1,2,…,H,j=1,2,…,W,H为输入特征图X的高,W为输入特征图X的宽,δ为激活函数,L为输入特征图X的通道数,Xi,j,c为输入特征图X第c个通道上第i行第j列的特征值。
6.根据权利要求1所述的图像的超分辨率重建方法,其特征在于,所述S3中对各图像块对应的不同深度的特征图进行融合的方法,包括:对图像块对应的不同深度的特征图在特征通道上拼接后,进行卷积降维,得到融合后的特征图。
7.一种图像的超分辨率重建系统,其特征在于,包括:图像截取模块、特征提取模块、图像重建模块以及图像重组模块;
所述图像截取模块用于对待处理的低分辨率图像进行分块,得到多个图像块,并输出到所述特征提取模块中;
所述特征提取模块用于基于图像的通道注意力机制和位置注意力机制,在不同深度上提取所述图像截取模块输入的各图像块的特征,得到各图像块对应的不同深度的特征图,并输出到所述图像重建模块中;
所述图像重建模块用于对各图像块对应的不同深度的特征图进行融合,根据所需图像超分倍数,对所得融合后的特征图进行图像重建,得到各超分辨率图像块,并输出到所述图像重组模块中;
所述图像重组模块用于将图像重建模块输入的各超分辨率图像块进行重组,得到高分辨率图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华中科技大学,未经华中科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010051767.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:用于检测水溶液中气泡的存在的系统和方法
- 下一篇:等离子体处理装置
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序