[发明专利]基于对比掩码图像建模的图像分析方法与系统

摘要

本发明公开了一种基于对比掩码图像建模的图像分析方法与系统，它们是一一对应的方案，方案中将对比学习和掩码图像建模结合，相比于现有的实例级的对比学习方法，本发明对图像的内部结构建模，以获得对细粒度任务友好的表示；相比现有的掩码图像建模方法，本发明在自注意力机制的引导下选择遮盖区域以及特征预测，而不是重建被随机遮盖的像素或小图像块，因此训练更加高效。因此，通过本发明提供的对比掩码图像建模方法进行网络训练后，能够有效的提取图像的表征，从而在图像分析任务中获得更好的效果；通过实验表明本发明在图像分类、目标检测、语义分割等图像分析任务中获得了优于各项现有技术的效果。