[发明专利]图像修复模型的训练方法、装置、计算机设备及存储介质在审
| 申请号: | 202111164844.6 | 申请日: | 2021-09-30 |
| 公开(公告)号: | CN113888431A | 公开(公告)日: | 2022-01-04 |
| 发明(设计)人: | 宫振飞 | 申请(专利权)人: | OPPO广东移动通信有限公司 |
| 主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T5/50;G06T7/13;G06K9/62 |
| 代理公司: | 深圳市智圈知识产权代理事务所(普通合伙) 44351 | 代理人: | 吕静 |
| 地址: | 523860 广东*** | 国省代码: | 广东;44 |
| 权利要求书: | 查看更多 | 说明书: | 查看更多 |
| 摘要: | |||
| 搜索关键词: | 图像 修复 模型 训练 方法 装置 计算机 设备 存储 介质 | ||
1.一种图像修复方法,其特征在于,所述方法包括:
获取样本图像对应的掩膜图像,所述掩膜图像用于指示所述样本图像中的显著性物体所在区域;
提取所述样本图像的边缘图像作为第一边缘图像,所述边缘图像用于表征所述样本图像的图像内容的纹理;
基于预先训练的边缘补全模型,对所述第一边缘图像进行边缘补全,得到补全后的边缘图像作为第二边缘图像;
基于所述掩膜图像,获取所述样本图像对应的修复掩膜图像以及上下文掩膜图像,所述修复掩膜图像用于指示所述样本图像中待修复的区域,所述上下文掩膜图像用于指示对待修复的区域进行修复时的已知图像区域;
基于所述样本图像、所述修复掩膜图像、所述上下文掩膜图像以及所述第二边缘图像,对初始模型进行训练,得到训练后的图像修复模型。
2.根据权利要求1所述的方法,其特征在于,所述基于所述样本图像、所述修复掩膜图像、所述上下文掩膜图像以及所述第二边缘图像,对初始模型进行训练,得到训练后的图像修复模型,得到训练后的图像修复模型,包括:
基于所述修复掩膜图像以及上下文掩膜图像,得到背景区域图像,所述背景区域图像用于指示所述待修复的区域以及所述已知图像区域;
基于所述样本图像、所述修复掩膜图像、所述上下文掩膜图像、所述背景区域图像以及所述第二边缘图像,对初始模型进行训练,得到训练后的图像修复模型。
3.根据权利要求2所述的方法,其特征在于,所述基于所述样本图像、所述修复掩膜图像、所述上下文掩膜图像、所述背景区域图像以及所述第二边缘图像,对初始模型进行训练,得到训练后的图像修复模型,包括:
将所述背景区域图像与所述样本图像相乘,得到第一图像;
将所述第一图像与所述修复掩膜图像相加,得到第二图像;
将所述第二图像以及所述第二边缘图像进行图像连接,得到输入图像;
将所述输入图像输入至初始模型,得到所述初始模型输出的输出图像;
基于所述修复掩膜图像以及所述背景区域图像,获取所述输出图像相对所述样本图像的损失值作为总损失值;
基于所述总损失值,对所述初始模型进行迭代训练,直至所述初始模型满足预设条件,得到练后的图像修复模型。
4.根据权利要求3所述的方法,其特征在于,所述基于所述修复掩膜图像以及所述背景区域图像,获取所述输出图像相对所述样本图像的损失值作为总损失值,包括:
从所述样本图像中获取所述修复掩膜图像指示的区域作为第一区域图像,以及从所述输出图像中获取所述修复掩膜图像指示的区域作为第二区域图像;
获取所述第二区域图像相对所述第一区域图像的差异,作为第一损失值;
从所述样本图像中获取所述背景区域图像指示的区域作为第三区域图像,以及从所述输出图像中获取所述背景区域图像指示的区域作为第四区域图像;
获取所述第四区域图像相对所述第三区域图像的差异,作为第二损失值;
基于所述第一损失值以及所述第二损失值,得到所述输出图像相对所述样本图像的损失值作为总损失值。
5.根据权利要求2所述的方法,其特征在于,所述基于所述修复掩膜图像以及上下文掩膜图像,得到背景区域图像,包括:
将所述修复掩膜图像与所述上下文掩膜图像进行相加,得到背景区域图像。
6.根据权利要求1所述的方法,其特征在于,所述基于所述掩膜图像,获取所述样本图像对应的修复掩膜图像以及上下文掩膜图像,包括:
对所述掩膜图像进行膨胀处理,得到第一处理图像;
对所述掩膜图像进行腐蚀处理,得到第二处理图像;
基于所述掩膜图像、所述第一处理图像以及所述第二处理图像,获取所述样本图像对应的修复掩膜图像以及上下文掩膜图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于OPPO广东移动通信有限公司,未经OPPO广东移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111164844.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种多时点VAS疼痛评分转盘
- 下一篇:一种基于三维地质体的煤矿巷道建模方法
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序





