[发明专利]基于多尺度内卷网络的高光谱图像分类的方法在审
申请号: | 202111556994.1 | 申请日: | 2021-12-18 |
公开(公告)号: | CN114494846A | 公开(公告)日: | 2022-05-13 |
发明(设计)人: | 张安迪;刘芳;刘嘉;肖亮;徐洋;杨劲翔;郜文菲 | 申请(专利权)人: | 南京理工大学 |
主分类号: | G06V20/10 | 分类号: | G06V20/10;G06T5/00;G06N3/04;G06K9/62;G06V10/80;G06V10/764;G06V10/82 |
代理公司: | 南京理工大学专利中心 32203 | 代理人: | 陈鹏 |
地址: | 210094 *** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 尺度 内卷 网络 光谱 图像 分类 方法 | ||
1.一种基于多尺度内卷网络的高光谱图像分类的方法,其特征在于,包括以下步骤:
(1)对原始高光谱图像数据集进行最大最小归一化;
其中,归一化后的高光谱图像记作I,I的大小为H×W×C,H和W表示高光谱图像的长度和宽度,C为高光谱图像的光谱数,高光谱图像的类别数记为M;
(2)构建自适应的光谱去噪网络,即通过若干批归一化层、卷积层、池化层,使最后一层的特征图数量小于归一化后的高光谱图像通道数,自适应学习对当前任务有效的光谱信息;
其中,经过去噪网络后的特征图记为I1,大小为H×W×C1,C1<C;
(3)构建多尺度内卷子网络,即为I1中每一个光谱向量构造不同尺度邻域空间其中s≥1;再通过1×1的小卷积核压缩光谱向量,压缩后的光谱向量记为T,其中T的通道大小与邻域空间一致,为s×s;将T沿着通道方向展开至平面,即得到多个尺度的内卷核;将内卷核与光谱向量的邻域空间进行乘法运算,然后对区域信息求和,得到光谱相关的特征,最后融合多个尺度的输出特征,记为I11;
(4)构建空间卷积子网络,即通过采用多个三维卷积核,提取特征图I1的深层空间信息,同时在网络中嵌入Dropblock块,以概率p丢弃特征图中K×K×R大小的邻域空间像素点;I1经过空间卷积子网后的得到的特征图记为I12;
(5)融合由多尺度内卷子网提取到的光谱特征I11,以及空间卷积子网络提取到的空间特征I12;融合后的特征记为I2;对I2使用Softmax函数,将特征提取的结果转化为概率分布;采用交叉熵作为融合网络的损失函数,计算预测结果与地物标签之间的差值L1;
(6)构建自编码器,即采用三维卷积核,将I1的特征信息进行编码和解码以重构图像,重构图像记作选择均方误差作为自编码器的损失函数,I和之间的损失值记作L2;
(7)计算总损失,即将L1作为主损失,用于得到精细化的空谱特征,同时L2作为正则化项,以保持图像的重建质量,防止中间特征偏离原本的分布;总损失记为L,L=L1+L2,用于训练网络,并将训练好的网络为待分类的样本打上标签。
2.根据权利要求1所述的基于多尺度内卷网络的高光谱图像分类的方法,其特征在于,步骤(1)中所述对原始高光谱进行最大最小归一化,根据高光谱图像中的最大最小值,将数据收缩至[0,1]区间,归一化的公式如下:
其中,Imin和Imax分别表示高光谱图像中最大值和最小值。
3.根据权利要求1所述的基于多尺度内卷网络的高光谱图像分类的方法,其特征在于,步骤(2)中所述的构建自适应光谱去噪网络,采用多个1×1大小的卷积核,将I的光谱数压缩至C1,C1<C。
4.根据权利要求1所述的基于多尺度内卷网络的高光谱图像分类的方法,其特征在于,步骤(3)中所述的构建多尺度内卷子网络,根据去噪后的特征图I1构建多个尺度的邻域空间其中s≥1;取s=1,s=3,s=5,则三个尺度的邻域空间记为Z1,Z2,Z3;使用1×1的卷积核将I1的光谱通道大小变换至s2,并将变换后的特征图T沿着光谱维度展开成大小为s×s的内卷核,内卷核分别记为K1,K2,K3;内卷的过程可表示为:
其中,Invo为I1经过内卷操作后的输出,表示两个矩阵对应位置元素相乘,sum(*)表示沿着通道维度求和;
I1经过多个内卷层、池化层之后,由多尺度内卷子网得到的输出特征图记为I11。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京理工大学,未经南京理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111556994.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种浏览器扩展安装及自动更新方法
- 下一篇:消防用固定板组件