[发明专利]图像语义分割模型的优化方法、装置和电子设备在审
| 申请号: | 202110319553.3 | 申请日: | 2021-03-25 |
| 公开(公告)号: | CN112990218A | 公开(公告)日: | 2021-06-18 |
| 发明(设计)人: | 何栋梁;林天威 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
| 主分类号: | G06K9/34 | 分类号: | G06K9/34;G06K9/62;G06N3/04 |
| 代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张娜;臧建明 |
| 地址: | 100085 北京市*** | 国省代码: | 北京;11 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 图像 语义 分割 模型 优化 方法 装置 电子设备 | ||
1.一种图像语义分割模型的优化方法,包括:
获取标注图像和未标注图像;
基于所述标注图像分别确定第一图像语义分割模型和第二图像语义分割模型各自对应的交叉熵损失;其中,所述第一图像语义分割模型和所述第二图像语义分割模型的网络结构相同;
基于所述未标注图像分别确定所述第一图像语义分割模型和所述第二图像语义分割模型各自对应的其它损失;其中,所述其它损失包括一致性损失、对抗训练损失、或者稳定性损失中的至少一个;
根据所述第一图像语义分割模型和所述第二图像语义分割模型各自对应的交叉熵损失和其它损失,分别对所述第一图像语义分割模型和所述第二图像语义分割模型进行优化,并基于优化后的第一、第二图像语义分割模型确定目标图像语义分割模型。
2.根据权利要求1所述的方法,其中,若所述其它损失包括一致性损失,则基于所述未标注图像确定图像语义分割模型对应的一致性损失,包括:
将所述未标注图像输入至图像语义分割模型,得到所述未标注图像对应的第一预测结果,并对所述第一预测结果进行增广变换,得到所述未标注图像中各帧像素对应的第一数值;
对所述未标注图像进行所述增广变换,并将变换结果输入至所述图像语义分割模型,得到所述未标注图像中各帧像素对应的第二数值;
根据所述各帧像素对应的第一数值和第二数值,确定所述图像语义分割模型对应的一致性损失;其中,所述图像语义分割模型为所述第一图像语义分割模型和所述第二图像语义分割模型中的任一个模型。
3.根据权利要求2所述的方法,其中,所述根据所述各帧像素对应的第一数值和第二数值,确定所述图像语义分割模型对应的一致性损失,包括:
根据所述各帧像素对应的第一数值和第二数值,确定所述各帧像素对应的均方差;
根据所述各帧像素对应的均方差确定所述图像语义分割模型对应的一致性损失。
4.根据权利要求3所述的方法,其中,所述根据所述各帧像素对应的均方差确定所述图像语义分割模型对应的一致性损失,包括:
计算所述各帧像素对应的均方差的第一和;
将所述第一和与第三数值的比值,确定为所述图像语义分割模型对应的一致性损失;其中,第三数值为所述未标注图像的宽度和高度的乘积。
5.根据权利要求1-3任一项所述的方法,其中,若所述其它损失包括对抗训练损失,则基于所述未标注图像确定图像语义分割模型对应的对抗训练损失,包括:
将所述标注图像和所述标注图像的标注数据的级联操作结果输入至判别器,得到所述标注图像对应的第一判别结果和所述标注图像在所述判别器M层中各层的第一特征;
将所述未标注图像和所述未标注图像输入至所述图像语义分割模型得到的第一预测结果的级联操作结果输入至所述判别器,得到所述未标注图像对应的第二判别结果和所述未标注图像在所述各层的第二特征;
根据所述第一判别结果、所述标注图像在所述各层的第一特征、所述第二判别结果、以及所述未标注图像在所述各层的第二特征确定所述图像语义分割模型对应的对抗训练损失;其中,所述图像语义分割模型为所述第一图像语义分割模型和所述第二图像语义分割模型中的任一个模型。
6.根据权利要求5所述的方法,其中,所述根据所述第一判别结果、所述标注图像在所述各层的第一特征、所述第二判别结果、以及所述未标注图像在所述各层的第二特征确定所述图像语义分割模型对应的对抗训练损失,包括:
根据所述第一判别结果和所述第二判别结果,确定所述判别器和所述图像语义分割模型之间的博弈损失;
根据所述第二判别结果确定所述图像语义分割模型对应的自训练损失;
根据所述标注图像在所述各层的第一特征和所述未标注图像在所述各层的第二特征,确定所述判别器和所述图像语义分割模型之间的特征匹配损失;
根据所述博弈损失、所述自训练损失以及所述特征匹配损失,确定所述图像语义分割模型对应的对抗训练损失。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110319553.3/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





