[发明专利]一种遮挡弹性的行人重识别对抗攻击方法

说明书

本发明公开了一种遮挡弹性的行人重识别对抗攻击方法，采用二阶段的训练方式生成攻击图案，并将图像迁移领域的上下文损失应用于攻击图案生成的损失函数中，增强了在应用遮挡模板分区域训练时子攻击模块的攻击效果，保证了攻击图案在完整情况下的攻击性能，又使生成的攻击图案在部分遮挡的情况下仍具有较好的攻击效果。

技术领域

本发明涉及计算机视觉技术领域，尤其涉及一种遮挡弹性的行人重识别对抗攻击方法。

背景技术

近年来，基于深度学习的计算机视觉技术取得了令人瞩目的成就，为智慧城市的发展提供了强有力的支持。基于深度学习的计算机视觉系统在实现智能城市的目标检测、人脸识别、行人检测与识别、图像分割等基础任务方面展现出了良好的前景。智能城市系统可以利用这些技术帮助我们发现可疑车辆，分析交通状况，为智能交通，改善城市管理，打击犯罪，和许多其他智能服务。

其中，行人重识别(Re-ID)是智慧城市的重要任务之一，具有广泛的应用前景。行人重识别是利用多个摄像头捕捉行人的外观或姿态特征，实现跨摄像头行人识别。我们可以利用目标图像查询监控数据库，然后行人重识别系统将返回许多与查询目标相似的结果图像。结果由监控数据库中图片的排序组成，与查询的目标图像相似度越高排序就越靠前。由于行人重识别系统具有连续识别同一目标的能力，因此可以将其与人脸识别相结合，应用于系统中，以协助人员在各种场景下，如追踪罪犯、社区内外人员进出管理等。

早期的行人重识别技术通常与多摄像头跟踪技术相结合，利用动态贝叶斯网络生成的标签与行人特征之间的概率关系，得到识别结果。最近的基于深度学习的方法通过比较行人之间的相似性，提高了从大量输入行人数据中提取行人特征的能力。虽然现有的行人重识别方法已经在准确率上已有了显著提高，但其鲁棒性的问题尚未得到充分的研究。

最近对抗攻击的相关研究表明，一些难以察觉的对抗性扰动可能会导致最先进的深度神经网络输出的错误结果。对抗性攻击可以发现深层神经网络的弱点，我们通过攻击的方式评估基于深度学习的行人重识别任务的鲁棒性。

AdvPattern是一种针对行人重识别系统的攻击手段。AdvPattern的攻击方法生成了T恤上的攻击图案实现了对物理世界的攻击。数据库中图像是由多个不同角度的相机拍摄的，该方法通过拉远不同摄像头下同一行人的相似度和拉近相同摄像头下同一行人的相似度的训练方法生成攻击图案。应用此方法数据库中与查询目标为同一个行人的图片在行人重识别系统输出的排列顺序相对靠后，实现了对行人重识别系统的攻击效果。

AdvPattern可以成功地欺骗行人重识别模型，并破坏行人重识别应用程序。但是，AdvPattern没有考虑到攻击图案由于行人的行为而被部分遮挡的情况。例如，在行走过程中，摆动的手臂可以阻挡攻击图案的底部部分。经观察发现被遮挡的像素会导致攻击图案失去攻击能力。因此，为了进一步评价现实世界中的行人重识别系统，需要进一步提高攻击图案对遮挡的鲁棒性。

发明内容

本发明针对以上技术缺点，目的是提供一种遮挡弹性的行人重识别对抗攻击方法。

为了实现上述目的，本发明提供如下技术方案：

一种遮挡弹性的行人重识别对抗攻击方法，包括以下步骤：

S1、攻击块分区：将攻击图案划分为两个区域，分别为四角部分和中心部分，对这两个区域分别进行训练，命名为δ_central和δ_corner，将初始化δ_central和δ_corner的对抗样本分别放入预先训练好的行人重识别网络中，提取样本的深度特征；

S2、相似度计算：来自不同摄像机的行人图像的特征组成特征集合，通过引导损失函数向相反的方向变化来实现攻击，得到了具有一定攻击效果的两个子攻击图案δ_central和δ_corner，两个子攻击图案没有攻击能力的区域的像素值为0；