[发明专利]图像分割标签的生成方法、装置、电子设备及存储介质在审

专利信息
申请号: 202111500780.2 申请日: 2021-12-09
公开(公告)号: CN114170233A 公开(公告)日: 2022-03-11
发明(设计)人: 吴捷;覃杰;肖学锋 申请(专利权)人: 北京字跳网络技术有限公司
主分类号: G06T7/10 分类号: G06T7/10
代理公司: 北京远智汇知识产权代理有限公司 11659 代理人: 范坤坤
地址: 100190 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 图像 分割 标签 生成 方法 装置 电子设备 存储 介质
【说明书】:

本公开实施例公开了一种图像分割标签的生成方法、装置、电子设备及存储介质,其中该方法包括:获取原始图像的特征图,确定特征图的特征响应图;特征响应图中响应值,表征特征图中对应特征在图像分类时的权重;增大特征响应图中预设范围内的响应值,根据增大的特征响应图重构特征图;基于重构的特征图确定第一类别激活图,根据第一类别激活图确定图像分割标签。通过对特征响应图进行调制,能够增加与图像分割关联程度较高、但容易被图像分类的神经网络忽略的特征的权重。通过基于调制后的特征响应图重构的特征图,根据重构的特征图生成类别激活图,能够使类别激活图覆盖完整的物体区域,得到高精度的分割标签,有利于优化图像语义分割网络的训练效果。

技术领域

本公开实施例涉及计算机技术领域,尤其涉及一种图像分割标签的生成方法、装置、电子设备及存储介质。

背景技术

图像语义分割技术是以语义属性作为划分标准实现逐像素分类预测的技术。图像语义分割能够得到图像中各物体的语义以及位置坐标,使其在围绕场景理解展开的诸多领域中具有巨大实用价值。

由于像素级别的分割标签较难获取,现常用粗粒度的类别标签作为分割标签,进行图像语义分割网络的弱监督学习。现有技术中,通常将图像分类网络中特征图的类别激活图(Class Activation Mapping,CAM)作为分割标签。

现有技术的不足之处至少包括:类别激活图中的响应区域为与判别物体的分类关联性高的区域,而不能覆盖物体的全部区域。采用CAM作为分割标签,导致分割标签的精度较低,从而使图像语义分割网络的训练效果较差。

发明内容

本公开实施例提供了一种图像分割标签的生成方法、装置、电子设备及存储介质,能够生成高精度的分割标签,有利于优化图像语义分割网络的训练效果。

第一方面,本公开实施例提供了一种图像分割标签的生成方法,包括:

获取原始图像的特征图,确定所述特征图的特征响应图;所述特征响应图中响应值,表征所述特征图中对应特征在图像分类时的权重;

增大所述特征响应图中预设范围内的响应值,根据增大的特征响应图重构所述特征图;

基于重构的特征图确定第一类别激活图,根据所述第一类别激活图确定图像分割标签。

第二方面,本公开实施例还提供了一种图像分割标签的生成装置,包括:

响应图确定模块,用于获取原始图像的特征图,确定所述特征图的特征响应图;所述特征响应图中响应值,表征所述特征图中对应特征在图像分类时的权重;

特征图重构模块,用于增大所述特征响应图中预设范围内的响应值,根据增大的特征响应图重构所述特征图;

分割标签确定模块,用于基于重构的特征图确定第一类别激活图,根据所述第一类别激活图确定图像分割标签。

第三方面,本公开实施例还提供了一种电子设备,所述电子设备包括:

一个或多个处理器;

存储装置,用于存储一个或多个程序,

当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本公开实施例任一所述的图像分割标签的生成方法。

第四方面,本公开实施例还提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如本公开实施例任一所述的图像分割标签的生成方法。

本公开实施例的技术方案,获取原始图像的特征图,确定特征图的特征响应图;特征响应图中响应值,表征特征图中对应特征在图像分类时的权重;增大特征响应图中预设范围内的响应值,根据增大的特征响应图重构特征图;基于重构的特征图确定第一类别激活图,根据第一类别激活图确定图像分割标签。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202111500780.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top