[发明专利]基于归一化和特征增强的跨域行人重识别方法有效
申请号: | 202110689585.2 | 申请日: | 2021-06-21 |
公开(公告)号: | CN113392786B | 公开(公告)日: | 2022-04-12 |
发明(设计)人: | 殷光强;贾召钱;王文超;曾宇昊;王春雨 | 申请(专利权)人: | 电子科技大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/40;G06V10/774;G06V10/80;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 成都天嘉专利事务所(普通合伙) 51211 | 代理人: | 毛光军 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 归一化 特征 增强 行人 识别 方法 | ||
1.基于归一化和特征增强的跨域行人重识别方法,其特征在于,包括建立识别网络模型、图像特征归一化、图像特征恢复、图像特征输出;
所述建立识别网络模型,包括建立具有实例归一化单元IN、残差权重训练单元CMS和注意力单元CAB的归一化增强模块NEM,并以ResNet50模型为主干网络,将归一化增强模块NEM插入到ResNet50模型中,构成识别网络模型;所述ResNet50模型包括依次通信连接的Res1单元、Res2单元、Res3单元、Res4单元、Res5单元和Head单元,且Res2单元、Res3单元、Res4单元和Res5单元的输出端分别插入有归一化增强模块NEM;
所述图像特征归一化包括以下步骤:
S11,基于ResNet50模型提取行人图像特征x∈Rc×h×w携带的特征信息,其中,x为归一化增强模块NEM的输入特征,c为图像特征的通道数量、h为图像特征的高度、w为图像特征的宽度,Rc×h×w表示c×h×w维的实数域空间,x∈Rc×h×w表示的是输入特征x是c×h×w维的实数域空间中的一个向量;
S12,利用实例归一化单元IN获取输入特征x∈Rc×h×w的每个通道中的均值μ(x)和方差σ(x),并基于获取的均值μ(x)和方差σ(x)计算出归一化特征x1,计算公式为:
其中,γ和β都是可学习的参数向量,且γ∈Rc、β∈Rc,表示γ和β都为是c维的实数域空间中的向量;γ和β元素初始值分别设置为1和0,然后在训练过程中自动更新;
所述图像特征恢复包括以下步骤:
S21,利于残差权重训练单元CMS根据归一化特征x1学习到一个残差权重Wr,即有:
Wr=sigmoid(mean(conv(x1)))
其中,conv(·)表示卷积、mean(·)表示求全局均值、sigmoid(·)表示激活函数;
S22,基于残差权重Wr融合输入特征x和归一化特征x1,以恢复图像特征因风格归一化所丢失的判别信息,融合公式为:
x2=Wr×x1+(1-Wr)×x
其中,x2为恢复后的图像特征,命名为恢复后特征,且x2∈Rc×h×w,表示的是恢复后特征x2是c×h×w维的实数域空间中的一个向量;
所述图像特征输出包括以下步骤:
S31,利用注意力单元CAB探索恢复后特征x2中不同通道之间的关联性,并自适应提取通道注意力权重Wc,即有:
Wc=ca(x2)
其中,ca(·)为注意力单元CAB,通道注意力权重Wc衡量了x2中各通道信息的重要性;
S32,借助通道注意力权重Wc对恢复后特征x2进行过滤,以增强行人特征的表征能力,即有:
f=(Wc+1)×x2
其中,f为归一化增强模块NEM的输出特征;
S33,分别计算输入特征x的中心损失Cx和输出特征f中心损失Cf,以衡量输入特征x和输出特征f在特征空间中的类内离散度,计算公式为:
其中,cxj∈Rd,代表输入特征x中第j个行人的类中心;cfj∈Rd,代表输出特征f中第j个行人的类中心;n代表数据集中行人总数,m表示第j个行人的特征总数,xji表示输入特征x中第j个行人的第i个特征,d代表每一个特征的维度,Rd代表d维的实数域空间,即,cxj和cfj都是d维的实数域空间中的向量;
S34,基于中心损失cf和cx建立NEM损失函数,NEM损失函数为:
其中,LNEM为由NEM5的输入特征x和输出特征f计算得到的损失值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110689585.2/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种纯天然绿色配合家畜养殖饲料
- 下一篇:一种热管式印刷电路板换热器