[发明专利]基于稀疏标注数据集的新型目标检测方法与系统在审

专利信息
申请号: 202310174614.0 申请日: 2023-02-16
公开(公告)号: CN116342971A 公开(公告)日: 2023-06-27
发明(设计)人: 李特;顾建军;吴连俊;王兴刚 申请(专利权)人: 之江实验室;华中科技大学
主分类号: G06V10/774 分类号: G06V10/774;G06V10/764;G06V10/82;G06N3/0464;G06N3/09
代理公司: 深圳市六加知识产权代理有限公司 44372 代理人: 向彬
地址: 311121 浙江省杭州市余*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 稀疏 标注 数据 新型 目标 检测 方法 系统
【权利要求书】:

1.一种基于稀疏标注数据集的新型目标检测系统,其特征在于,包括基于指数滑动平均的教师检测器和一个双图片输入端口的副教师检测器,其中:

教师检测器在训练期间不回传梯度,而仅在每次训练迭代结束时通过指数滑动平均方式更新参数,由指数滑动平均更新的教师检测器是双输入端口的副教师检测器的平滑版本;

教师检测器和双输入的副教师检测器的输入图像分别是原始的、弱增强的和强增强的,其中教师检测器输入图像是原始图像,即原始图像被馈送到教师检测器以生成教师伪标签集,弱增强和强增强图像被馈送到两个输入端口的副教师检测器以生成原始伪标签集;

每个原始伪标签集由教师检测器的输出的伪标签集联合稀疏标注框进行修正和整合,最后用修正整合完的标注框对副教师检测器的预测输出进行监督。

2.如权利要求1所述的基于稀疏标注数据集的新型目标检测系统,其特征在于,所述教师检测器和副教师检测器均采用全卷积单级目标检测器FCOS实现。

3.如权利要求1或2所述的基于稀疏标注数据集的新型目标检测系统,其特征在于,教师检测器和双输入的副教师检测器的输入图像分别是原始的、弱增强的和强增强的,通过两个单级目标检测器FCOS预测输出三组分类分数图、偏移量图和中心度图。

4.如权利要求1或2所述的基于稀疏标注数据集的新型目标检测系统,其特征在于,根据各个分支输出的预测图生成具有类别信息和位置信息的三组伪标签集合,即通过滤除目标分数较低的伪标签框和重叠度较大的冗余框得到最后的伪标签集合,依照教师网络的伪标签集合和已有的稀疏标注框集合,对副教师网络的两个分支A和B输出的伪标签集合进行修正操作,尽可能的滤除其中出现的错误类别信息或错误位置信息的伪标签框,输出两个分支各自的监督信号,以监督副教师网络输出的预测值。

5.如权利要求4所述的基于稀疏标注数据集的新型目标检测系统,其特征在于,所述目标分数为分类分数x中心度。

6.如权利要求1或2所述的基于稀疏标注数据集的新型目标检测系统,其特征在于,副教师网络的参数由监督信号和预测输出之间的损失函数回传的梯度进行更新,教师网络的参数由指数滑动平均EMA方式进行更新。

7.一种基于稀疏标注数据集的新型目标检测方法,其特征在于,所述方法包括如下步骤:

(1)构建一个双图片输入端口的副教师检测器,以及一个通过指数滑动平均方式更新参数的教师检测器,训练开始时为两者赋予相同的预训练模型参数;

(2)对稀疏标注的训练图片进行两种不同程度的数据增强;

(3)将原图、弱数据增强图和强数据增强图分别输入教师检测器分支和副教师检测器的两个分支,通过教师检测器分支和副教师检测器的两个分支分别预测输出三组分类分数图、偏移量图和中心度图;

(4)根据每一组各自的分类分数图、偏移量图生成每个参考点的伪标签框,滤除分类分数和中心度的乘积小于预设阈值的所有伪标签框,并通过非极大值抑制算法去除重叠度过高的冗余框,得到三个伪标签集合;

(5)根据得到的教师检测器的伪标签集合T去修正副教师检测器输出的伪标签集合A和B,将集合T中的所有伪标签分别转换到A和B的变换域中;

(6)转换变换域后的伪标签集合Ta/Tb,将Ta/Tb中与A和B的所有伪标签交并比小于设定阈值的伪标签作为遗漏的标注框,将A和B中所有与Ta/Tb中某个伪标签Pi交并比大于预设阈值且分类分数比Pi小的伪标签替换为Pi;

(7)将修正后的伪标签集合A`和B`分别与稀疏标注的标注框进行合并,去除其中所有与标注框交并比大于预设阈值的伪标签,得到两组监督信号,分别对相应的这两个分支输出的预测信息进行监督学习;

(8)按上述步骤训练预设周期后,将得到的检测器模型在完全标注的测试集上进行测试,测试其检测性能,达到预设性能后,通过上述检测器模型对待检测图像进行目标检测。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于之江实验室;华中科技大学,未经之江实验室;华中科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202310174614.0/1.html,转载请声明来源钻瓜专利网。

同类专利
专利分类
×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top