[发明专利]图像检测方法以及电子设备、存储装置

权利要求书

1.一种图像检测方法，其特征在于，包括：

提取第一模态图像的第一特征图，并提取第二模态图像的第二特征图；其中，所述第一模态图像和所述第二模态图像均为对目标对象采集得到的；

提取所述第一特征图中各个第一像素位置的第一位置特征，并提取所述第二特征图中各个第二像素位置的第二位置特征；

将所述各个第一像素位置的第一位置特征和所述各个第二像素位置的第二位置特征进行融合，得到模态融合特征；

利用所述模态融合特征进行检测，得到所述目标对象的预测类别。

2.根据权利要求1所述的方法，其特征在于，所述将所述各个第一像素位置的第一位置特征和所述各个第二像素位置的第二位置特征进行融合，得到模态融合特征，包括：

针对每一所述第一像素位置，基于所述第一像素位置的第一位置特征分别与所述各个第二像素位置的第二位置特征之间的第一相关度，对所述第一像素位置的第一位置特征进行模态增强，得到所述第一像素位置的第一增强特征；以及，

针对每一所述第二像素位置，基于所述第二像素位置的第二位置特征分别与所述各个第一像素位置的第一位置特征之间的第二相关度，对所述第二像素位置的第二位置特征进行模态增强，得到所述第二像素位置的第二增强特征；

利用所述第一相关度和所述第二相关度，将所述第一增强特征和所述第二增强特征进行特征融合，得到所述模态融合特征。

3.根据权利要求2所述的方法，其特征在于，所述基于所述第一像素位置的第一位置特征分别与所述各个第二像素位置的第二位置特征之间的第一相关度，对所述第一像素位置的第一位置特征进行模态增强，得到所述第一像素位置的第一增强特征，或者，所述基于所述第二像素位置的第二位置特征分别与所述各个第一像素位置的第一位置特征之间的第二相关度，对所述第二像素位置的第二位置特征进行模态增强，得到所述第二像素位置的第二增强特征，包括：

获取目标像素位置的目标位置特征分别与各个候选像素位置的候选位置特征之间的特征相关度；

利用所述特征相关度分别对所述候选位置特征进行加权，得到所述目标位置特征的模态互补特征；

将所述模态互补特征和所述目标位置特征进行融合，得到所述目标像素位置的目标增强特征；

其中，在所述目标像素位置为所述第一像素位置的情况下，所述目标位置特征为所述第一位置特征，所述候选像素位置为所述第二像素位置，所述特征相关度为所述第一相关度，所述候选位置特征为所述第二位置特征，且所述目标增强特征为所述第一增强特征；在所述目标像素位置为所述第二像素位置的情况下，所述目标位置特征为所述第二位置特征，所述候选像素位置为所述第一像素位置，所述特征相关度为所述第二相关度，所述候选位置特征为所述第一位置特征，且所述目标增强特征为所述第二增强特征。

4.根据权利要求3所述的方法，其特征在于，所述利用所述特征相关度分别对所述候选位置特征进行加权，得到所述目标位置特征的模态互补特征，包括：

对所述特征相关度进行归一化处理，并利用归一化之后的特征相关度对所述候选位置特征进行加权求和，得到所述模态互补特征；

和/或，所述将所述模态互补特征和所述目标位置特征进行融合，得到所述目标像素位置的目标增强特征，包括：

将所述目标像素位置的模态互补特征和目标位置特征相加，得到所述目标像素位置的目标增强特征。

5.根据权利要求2所述的方法，其特征在于，所述利用所述第一相关度和所述第二相关度，将所述第一增强特征和所述第二增强特征进行特征融合，得到所述模态融合特征，包括：

基于针对所述各个第一像素位置所得到的第一相关度，得到所述第一增强特征的第一模态重要度；以及，

基于针对所述各个第二像素位置所得到的第二相关度，得到所述第二增强特征的第二模态重要度；

利用所述第一模态重要度和所述第二模态重要度分别对所述第一增强特征和所述第二增强特征进行加权，得到所述模态融合特征。