[发明专利]变化检测模型训练和图像变化检测方法、装置及设备在审
申请号: | 202210348820.4 | 申请日: | 2022-04-01 |
公开(公告)号: | CN115131281A | 公开(公告)日: | 2022-09-30 |
发明(设计)人: | 刘文龙;刘俊;高斌斌 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T7/00 | 分类号: | G06T7/00;G06T7/11;G06T7/33;G06V10/40;G06V10/80;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 朱佳 |
地址: | 518044 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 变化 检测 模型 训练 图像 方法 装置 设备 | ||
1.一种变化检测模型训练方法,其特征在于,所述方法包括:
获得多个样本图像组,每个样本图像组包含内容配准的第一图像、第二图像以及样本标签,所述样本标签用于指示:所述第一图像以及所述第二图像各自相对于标准图像发生变化的实际图像区域;
采用所述多个样本图像组对待训练的变化检测模型进行迭代训练,获得相应的目标变化检测模型,每一次迭代包括如下步骤:
分别对输入的各样本图像组进行组内图像变化检测,获得各样本图像组内的第二图像相对于第一图像发生变化的第一图像区域;
对输入的各第一图像分别进行单相图像变化检测,获得各第一图像相对于所述标准图像发生变化的第二图像区域;
基于各样本图像组对应的样本标签、第一图像区域与第二图像区域确定模型损失,并基于所述模型损失进行参数调整。
2.根据权利要求1所述的方法,其特征在于,在分别对输入的各样本图像组进行组内图像变化检测,获得各样本图像组内的第二图像相对于第一图像发生变化的第一图像区域之前,所述方法还包括:
分别提取各第一图像的第一特征集合,每个第一特征集合包括:相应的第一图像分别对应于预设的多个图像尺度的第一图像特征;
分别提取各第二图像的第二特征集合,每个第二特征集合包括:相应的第二图像分别对应于所述多个图像尺度的第二图像特征;
所述分别对输入的各样本图像组进行组内图像变化检测,获得各样本图像组内的第二图像相对于第一图像发生变化的第一图像区域,包括:
基于获得的各第一特征集合和各第二特征集合,分别对所述各样本图像组进行组内图像变化检测,获得各样本图像组各自对应的所述第一图像区域。
3.根据权利要求2所述的方法,其特征在于,基于获得的各第一特征集合和第二特征集合,分别对所述各样本图像组进行组内图像变化检测,获得各样本图像组各自对应的所述第一图像区域,包括:
针对所述各样本图像组,分别执行如下操作:
针对一个样本图像组,分别将相应的第一特征集合和第二特征集合中,对应同一图像尺度的图像特征进行特征融合,获得所述多个图像尺度各自对应的融合图像特征;
基于获得的各融合图像特征,对所述一个样本图像组进行组内图像变化检测,获得所述第一图像区域。
4.根据权利要求3所述的方法,其特征在于,分别将相应的第一特征集合和第二特征集合中,对应同一图像尺度的图像特征进行特征融合,获得所述多个图像尺度各自对应的融合图像特征,包括:
针对所述多个图像尺度,分别执行如下操作:
针对一个图像尺度,对第一特征集合中相应的第一图像特征进行基于自注意力机制的更新处理,获得第三图像特征,以及,对第二特征集合中相应的第二图像特征进行基于自注意力机制的更新处理,获得第四图像特征;
基于所述第三图像特征,对所述第四图像特征进行基于注意力机制的融合处理,获得第五图像特征,以及,基于所述第四图像特征,对所述第三图像特征进行基于注意力机制的融合处理,获得第六图像特征;
基于所述第五图像特征和所述第六图像特征进行特征融合,获得所述一个图像尺度的融合图像特征。
5.根据权利要求4所述的方法,其特征在于,对第一特征集合中相应的第一图像特征进行基于自注意力机制的更新处理,获得第三图像特征,包括:
通过所述变化检测模型的自注意力网络对所述第一图像特征进行处理,获得所述第一图像特征中各元素的第一注意力权重,每个第一注意力权重用于表征相应元素与其他元素之间的关联程度;
基于获得的各个第一注意力权重,通过所述自注意力网络对所述第一图像特征进行加权处理,获得所述第三图像特征。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210348820.4/1.html,转载请声明来源钻瓜专利网。