[发明专利]基于归一化和特征增强的跨域行人重识别方法有效

专利信息
申请号: 202110689585.2 申请日: 2021-06-21
公开(公告)号: CN113392786B 公开(公告)日: 2022-04-12
发明(设计)人: 殷光强;贾召钱;王文超;曾宇昊;王春雨 申请(专利权)人: 电子科技大学
主分类号: G06V40/10 分类号: G06V40/10;G06V10/40;G06V10/774;G06V10/80;G06V10/82;G06K9/62;G06N3/04;G06N3/08
代理公司: 成都天嘉专利事务所(普通合伙) 51211 代理人: 毛光军
地址: 611731 四川省成*** 国省代码: 四川;51
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 归一化 特征 增强 行人 识别 方法
【权利要求书】:

1.基于归一化和特征增强的跨域行人重识别方法,其特征在于,包括建立识别网络模型、图像特征归一化、图像特征恢复、图像特征输出;

所述建立识别网络模型,包括建立具有实例归一化单元IN、残差权重训练单元CMS和注意力单元CAB的归一化增强模块NEM,并以ResNet50模型为主干网络,将归一化增强模块NEM插入到ResNet50模型中,构成识别网络模型;所述ResNet50模型包括依次通信连接的Res1单元、Res2单元、Res3单元、Res4单元、Res5单元和Head单元,且Res2单元、Res3单元、Res4单元和Res5单元的输出端分别插入有归一化增强模块NEM;

所述图像特征归一化包括以下步骤:

S11,基于ResNet50模型提取行人图像特征x∈Rc×h×w携带的特征信息,其中,x为归一化增强模块NEM的输入特征,c为图像特征的通道数量、h为图像特征的高度、w为图像特征的宽度,Rc×h×w表示c×h×w维的实数域空间,x∈Rc×h×w表示的是输入特征x是c×h×w维的实数域空间中的一个向量;

S12,利用实例归一化单元IN获取输入特征x∈Rc×h×w的每个通道中的均值μ(x)和方差σ(x),并基于获取的均值μ(x)和方差σ(x)计算出归一化特征x1,计算公式为:

其中,γ和β都是可学习的参数向量,且γ∈Rc、β∈Rc,表示γ和β都为是c维的实数域空间中的向量;γ和β元素初始值分别设置为1和0,然后在训练过程中自动更新;

所述图像特征恢复包括以下步骤:

S21,利于残差权重训练单元CMS根据归一化特征x1学习到一个残差权重Wr,即有:

Wr=sigmoid(mean(conv(x1)))

其中,conv(·)表示卷积、mean(·)表示求全局均值、sigmoid(·)表示激活函数;

S22,基于残差权重Wr融合输入特征x和归一化特征x1,以恢复图像特征因风格归一化所丢失的判别信息,融合公式为:

x2=Wr×x1+(1-Wr)×x

其中,x2为恢复后的图像特征,命名为恢复后特征,且x2∈Rc×h×w,表示的是恢复后特征x2是c×h×w维的实数域空间中的一个向量;

所述图像特征输出包括以下步骤:

S31,利用注意力单元CAB探索恢复后特征x2中不同通道之间的关联性,并自适应提取通道注意力权重Wc,即有:

Wc=ca(x2)

其中,ca(·)为注意力单元CAB,通道注意力权重Wc衡量了x2中各通道信息的重要性;

S32,借助通道注意力权重Wc对恢复后特征x2进行过滤,以增强行人特征的表征能力,即有:

f=(Wc+1)×x2

其中,f为归一化增强模块NEM的输出特征;

S33,分别计算输入特征x的中心损失Cx和输出特征f中心损失Cf,以衡量输入特征x和输出特征f在特征空间中的类内离散度,计算公式为:

其中,cxj∈Rd,代表输入特征x中第j个行人的类中心;cfj∈Rd,代表输出特征f中第j个行人的类中心;n代表数据集中行人总数,m表示第j个行人的特征总数,xji表示输入特征x中第j个行人的第i个特征,d代表每一个特征的维度,Rd代表d维的实数域空间,即,cxj和cfj都是d维的实数域空间中的向量;

S34,基于中心损失cf和cx建立NEM损失函数,NEM损失函数为:

其中,LNEM为由NEM5的输入特征x和输出特征f计算得到的损失值。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110689585.2/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top