[发明专利]基于全方位感知的伪装目标图像分割方法

说明书

本发明属于计算机视觉中的场景分割技术领域，提供了一种基于全方位感知的伪装目标图像分割方法，设计了一种面向精确伪装目标分割的新型全方位感知网络，其中提出了金字塔定位模块和双聚焦模块，来耦合局部特征和全局表示，以便更准确地定位伪装目标并精细划分边界，解决计算机视觉中伪装目标分割的问题。本发明的方法伪装目标分割的结果，同时在不同场景下具有有效性和实用性。

技术领域

本发明属于计算机视觉中的场景分割(SceneSegmentation)技术领域，实现结果为图像内容的分割，特别涉及一种真实环境图像中伪装目标的分割方法。

背景技术

二维图像分割是指把图像中属于不同物体的像素区分开，以此来确定环境图像中目标大小、形状和位置等信息的技术，是图像处理到图像分析的关键步骤，具有巨大的应用价值。近些年来，场景分割相关任务，如目标检测、深度估计、显著性区域检测和阴影检测等方法，都获得了显著的性能提升。

自然界中有相当多的生物进化出了高超的伪装本领(例如，保护色和模仿)，能将自己伪装以融入周围环境，进而达到逃避捕食者的目的。因为这类生物与背景之间高度的相似性，识别伪装的目标对于人类的视觉系统来说都是极具挑战性的任务，如果这类生物出现在以计算机视觉为基础的任务中，将对任务的准确性造成很大影响。因此，伪装目标分割是一个极具挑战的任务。同时，伪装目标分割能够有助于医学图像分析、蝗虫入侵监控和搜索救援等任务，它也是一个不可或缺的任务。

早期的伪装目标分割方法利用边缘、纹理和亮度等低级特征将物体从背景中区分出来。但这些方法只适用于一些简单的场景，在面对复杂的野外场景时就会失效。因此，近年来关于伪装目标分割的研究往往借助深度神经网络强大的能力来处理更具挑战性的场景。受自然界中捕食者捕获猎物过程的启发，许多伪装目标分割方法遵循着先定位后聚焦的模式来检测伪装目标的位置、大小和形状。然而，由于这些方法只根据区域级别的上下文特征做出决策，因此通常无法在更为混乱的场景中对伪装目标进行定位，也无法准确勾画出伪装目标的边界。

我们观察到，自然界中的顶级掠食者通常同时具备良好的中心视野和周边视野，使用中心视野来搜索目标，同时通过周边视野从场景环境中获取线索。因此，理想的伪装目标分割模型在检测目标时应该能够同时处理局部特征和全局表示。本发明基于对现有伪装目标分割技术的调查与分析，受自然界中顶级掠食者捕获猎物过程的启发，提出了一种新的神经网络，通过建立对输入场景的全方位感知来分割伪装目标，使模型能够在整个检测过程中同时利用局部特征和全局表示，形成了分割场景中伪装目标的全方位感知网络(Omni Perception Network)，即OPNet。OPNet的输入是包含伪装目标的RGB图像，输出是伪装目标的掩膜图像，掩膜图像中伪装目标区域的值为1，非伪装目标区域的值为0。实验证明，本方法能够有效分割出不同场景下不同类型的伪装目标，帮助场景理解提升准确度。

发明内容

本发明的目的是对场景的RGB图像，创新性地使用全方位感知的方式，在检测中集成局部特征和全局表示，进而实现伪装目标分割。OPNet先后包含特征提取器、金字塔定位模块(Pyramid Positioning Module)和双重聚焦模块(Dual Focus Module)，其中特征提取器使用Conformer作为主干网络提取局部特征和全局表示；金字塔定位模块(PyramidPositioning Module)结合局部特征和全局表示精确定位不同大小的目标对象；双重聚焦模块(Dyal Focus Module)则结合局部特征和全局表示确定目标的边界并消除干扰背景。本发明所述方法适用于分割不同种类、位置和大小的伪装目标。

本发明的技术方案：

一种基于全方位感知的伪装目标图像分割方法，步骤如下：

步骤1、构建伪装目标分割网络OPNet

伪装目标分割网络OPNet主要由特征提取器、一个金字塔定位模块和三个双重聚焦模块组成；