[发明专利]一种联合局部表征和全局建模的双时遥感变化检测方法

权利要求书

1.一种联合局部表征和全局建模的双时遥感变化检测方法，其特征在于：所述联合局部表征和全局建模的双时遥感变化检测方法包括如下步骤：

S1、获取双时遥感图像对，将图像对中的两图像分割为若干相同尺寸的子图；

S2、建立对偶主干网络模型并进行预训练，所述对偶主干网络模型包括并行的CNN模型和Transformer模型；

S3、采用预训练好的对偶主干网络模型对子图进行特征提取，对应获得CNN模型输出的多尺度局部特征图F_local和Transformer模型输出的多尺度全局特征图F_global；

S4、对相同空间分辨率下的局部特征图F_local和全局特征图F_global执行双分支信息交叉融合操作，所述局部特征图F_local的尺寸记为W×H×L_local，所述全局特征图F_global的尺寸记为W×H×L_global，其中，W为当前空间分辨率下局部特征图F_local或全局特征图F_global的宽度，H为当前空间分辨率下局部特征图F_local或全局特征图F_global的高度，L_local为当前空间分辨率下局部特征图F_local的通道深度，L_global为当前空间分辨率下全局特征图F_global的通道深度，所述双分支信息交叉融合操作具体如下：

S41、将局部特征图F_local和全局特征图F_global分别通过卷积操作统一尺寸为W×H×d，其中，d为局部特征图F_local或全局特征图F_global统一后的通道深度；

S42、线性展开局部特征图F_local和全局特征图F_global获取对应的向量组表示，依次记为(Q_local,K_local,V_local)和(Q_global,K_global,V_global)，其中，Q_local为局部特征图F_local的查询矩阵，K_local为局部特征图F_local的键矩阵，V_local为局部特征图F_local的值矩阵，Q_global为全局特征图F_global的查询矩阵，K_global为全局特征图F_global的键矩阵，V_global为全局特征图F_global的值矩阵，尺寸均为N×d，N＝W×H；

S43、计算局部特征图F_local的交叉注意力输出F_cross-local和全局特征图F_global的交叉注意力输出F_cross-global，尺寸均为W×H×d；

S44、将F_cross-local和F_cross-global沿通道方向堆叠，并通过残差模块获取尺寸为W×H×d的联合表示F_cross；

S5、对不同空间分辨率的联合表示F_cross执行多尺度特征图融合操作，获取多尺度融合特征图f_fuse，所述多尺度融合特征图f_fuse的尺寸为对应子图联合表示F_cross的最大尺寸，记为W₁×H₁×d₁；

S6、将图像对中对应子图获得的多尺度融合特征图f_fuse之间依次进行差值、上采样和卷积变换，获取尺寸为nW₁×nH₁×2的变化检测图F_final，其中，n为上采样的倍数。