[发明专利]图像分割标签的生成方法、装置、电子设备及存储介质在审
| 申请号: | 202111500780.2 | 申请日: | 2021-12-09 |
| 公开(公告)号: | CN114170233A | 公开(公告)日: | 2022-03-11 |
| 发明(设计)人: | 吴捷;覃杰;肖学锋 | 申请(专利权)人: | 北京字跳网络技术有限公司 |
| 主分类号: | G06T7/10 | 分类号: | G06T7/10 |
| 代理公司: | 北京远智汇知识产权代理有限公司 11659 | 代理人: | 范坤坤 |
| 地址: | 100190 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 图像 分割 标签 生成 方法 装置 电子设备 存储 介质 | ||
1.一种图像分割标签的生成方法,其特征在于,包括:
获取原始图像的特征图,确定所述特征图的特征响应图;所述特征响应图中响应值,表征所述特征图中对应特征在图像分类时的权重;
增大所述特征响应图中预设范围内的响应值,根据增大的特征响应图重构所述特征图;
基于重构的特征图确定第一类别激活图,根据所述第一类别激活图确定图像分割标签。
2.根据权利要求1所述的方法,其特征在于,所述确定所述特征图的特征响应图,包括:
将所述特征图经空间维度的全局平均池化和卷积处理,得到通道维度的第一特征响应图;或者,
将所述特征图经通道维度的全局平均池化和卷积处理,得到空间维度的第二特征响应图。
3.根据权利要求2所述的方法,其特征在于,若所述特征响应图为第一特征响应图,则所述基于重构的特征图确定第一类别激活图,包括:
确定与所述重构的特征图对应的空间维度的第三特征响应图;
增大所述第三特征响应图中所述预设范围内的响应值,根据增大的第三特征响应图对所述重构的特征图再次重构;
基于再次重构的特征图确定第一类别激活图。
4.根据权利要求2所述的方法,其特征在于,若所述特征响应图为第二特征响应图,则所述基于重构的特征图确定第一类别激活图,包括:
确定与所述重构的特征图对应的通道维度的第四特征响应图;
增大所述第四特征响应图中所述预设范围内的响应值,根据增大的第四特征响应图对所述重构的特征图再次重构;
基于再次重构的特征图确定第一类别激活图。
5.根据权利要求1所述的方法,其特征在于,所述增大所述特征响应图中预设范围内的响应值,包括:
基于预设调制函数对所述特征响应图进行调制,以增大所述特征响应图中所述预设范围内的响应值。
6.根据权利要求1所述的方法,其特征在于,所述根据增大的特征响应图重构所述特征图,包括:
将所述增大的特征响应图扩展至与所述特征图具备相同分辨率;
将扩展分辨率后的所述增大的特征响应图与所述特征图进行像素级乘积。
7.根据权利要求1-6中任一所述的方法,其特征在于,所述特征图包括至少一个层级的特征图;相应的,在重构当前层级的特征图之后,还包括:
根据重构的当前层级的特征图,确定下一层级的特征图;
将所述下一层级的特征图作为新的当前层级的特征图进行重构,直至确定出最高层级的特征图为止;
所述基于重构的特征图确定第一类别激活图,包括:基于最高层级的特征图确定第一类别激活图。
8.根据权利要求1-6中任一所述的方法,其特征在于,所述预设范围的最大值小于所述特征响应图的最大值;
相应的,所述根据所述第一类别激活图确定图像分割标签,包括:
根据所述特征图确定第二类别激活图;
根据所述第一类别激活图以及所述第二类别激活图,确定图像分割标签。
9.根据权利要求8所述的方法,其特征在于,所述第一类别激活图基于第一分支网络确定,所述第二类别激活图基于第二分支网络确定;
相应的,所述第一分支网络和所述第二分支网络基于下述步骤训练:
获取样本图像,以及所述样本图像的分类标签;
将所述第一分支网络输出的所述样本图像的预测分类,与所述分类标签之间的损失,作为第一损失;
将所述第二分支网络输出的所述样本图像的预测分类,与所述分类标签之间的损失,作为第二损失;
将所述第一分支网络输出的所述样本图像的第一类别激活图,与所述第二分支网络输出的所述样本图像的第二类别激活图之间的损失,作为第三损失;
根据所述第一损失、所述第二损失和所述第三损失,训练所述第一分支网络和所述第二分支网络。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京字跳网络技术有限公司,未经北京字跳网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111500780.2/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





