[发明专利]一种基于动态混合注意力机制的轻量级超分辨重建方法及系统在审
申请号: | 202210962664.0 | 申请日: | 2022-08-11 |
公开(公告)号: | CN115439321A | 公开(公告)日: | 2022-12-06 |
发明(设计)人: | 凌强;令狐俊杰 | 申请(专利权)人: | 中国科学技术大学 |
主分类号: | G06T3/40 | 分类号: | G06T3/40;G06V10/77;G06V10/82;G06N3/04 |
代理公司: | 北京科迪生专利代理有限责任公司 11251 | 代理人: | 金怡 |
地址: | 230026 安*** | 国省代码: | 安徽;34 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 动态 混合 注意力 机制 轻量级 分辨 重建 方法 系统 | ||
1.一种基于动态混合注意力机制的轻量级超分辨重建方法,其特征在于,包括:
步骤S1:对输入的低分辨率图像进行浅层特征提取,得到不同维度的特征图;
步骤S2:将所述不同维度的特征图分割为若干个子图,对每个所述子图采用非局部的空间注意力机制进行计算,得到其空间维度上的长距离依赖关系;输出非局部的空间注意力特征图;
步骤S3:将所述非局部的空间注意力特征图经过n个深层特征提取模块进行深层特征提取,输出特征图xn;其中,每层所述深层特征提取模块包括:将所述非局部的空间注意力特征图经过注意力分支与非注意力分支,提取各个维度特征图中重要的对象和区域,并使用动态注意力模块对所述注意力分支与所述非注意力分支计算对应的权重;
步骤S4:将xn采用非局部的空间注意力机制进行计算,输出其非局部的空间注意力特征图xn′;
步骤S5:使用最近邻插值的上采样方式与1x1卷积核形成像素级别的空间-通道注意力机制,对xn′进行重建,得到放大的xn′;对所述低分辨率图像使用亚像素方式上采样后与所述放大的xn′进行融合,得到最终的超分辨率图像。
2.根据权利要求1所述的基于动态混合注意力机制的轻量级超分辨重建方法,其特征在于,所述步骤S2:将所述不同维度的特征图分割为若干个子图,对每个所述子图采用非局部的空间注意力机制进行计算,得到其空间维度上的长距离依赖关系;输出非局部的空间注意力特征图,具体包括:
步骤S21:将所述不同维度的特征图分割为4张子图;设定当前所述子图的像素由ai表示,该子图的其他像素由aj表示,计算该像素点ai与其它像素点aj之间相似性权重yi如公式(1)~(2)所示:
其中,C(·)是归一化操作,C(x)=∑jf(xi,xj);g(·)是一个映射函数,对输入特征进行变换;f(·)表示Embedded Gaussian函数,用于度量两个点之间的相似性;θ(ai)=Wθai,并且有g(aj)=Wgaj,Wθ、Wg分别代表1x1卷积作用产生的参数;
步骤S22:最后根据计算结果,并采用残差连接,得到区域级的非局部注意力机制输出非局部的空间注意力特征图x′i,如公式(3)所示:
x′i=Wzyi+ai (3)
其中,Wz代表1x1卷积作用产生的参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学技术大学,未经中国科学技术大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210962664.0/1.html,转载请声明来源钻瓜专利网。