[发明专利]图像生成方法、图像生成模型的训练方法、装置及设备在审
申请号: | 202110604131.0 | 申请日: | 2021-05-31 |
公开(公告)号: | CN113379624A | 公开(公告)日: | 2021-09-10 |
发明(设计)人: | 顾瑾 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06T5/00 | 分类号: | G06T5/00;G06T5/50 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 宁立存 |
地址: | 100085 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 生成 方法 模型 训练 装置 设备 | ||
1.一种图像生成方法,其特征在于,包括:
将第一图像输入第一图像生成模型,对所述第一图像进行图像处理,输出第一处理图像,所述第一处理图像的清晰度高于所述第一图像;
基于所述第一处理图像和所述第一图像,获取第一变换参数集,所述第一变换参数集为将所述第一图像变换为所述第一处理图像的参数集;
将第二图像输入第二图像生成模型,对所述第二图像进行特征提取,得到与所述第二图像对应的第一特征图,所述第一图像为对所述第二图像进行下采样得到的图像;
基于所述第一特征图和所述第一变换参数集,生成第二变换参数集,所述第二变换参数集用于提高所述第二图像的清晰度;
采用所述第二变换参数集中的变换参数对所述第二图像进行线性变换,输出目标图像。
2.根据权利要求1所述的图像生成方法,其特征在于,所述第一变换参数集包括第一变换参数和第二变换参数,所述第一变换参数为线性变换的斜率,所述第二变换参数为线性变换的截距,所述基于所述第一特征图和所述第一变换参数集,生成第二变换参数集包括:
基于所述第一特征图、所述第一变换参数和所述第二变换参数,获取所述第二变换参数集。
3.根据权利要求2所述的图像生成方法,其特征在于,所述基于所述第一特征图、所述第一变换参数和所述第二变换参数,获取所述第二变换参数集包括:
将所述第一特征图、所述第一变换参数和所述第二变换参数进行拼接,得到拼接特征图;
对所述拼接特征图进行亚像素卷积,得到第四特征图;
基于所述第四特征图,获取所述第二变换参数集。
4.根据权利要求3所述的图像生成方法,其特征在于,所述对所述拼接特征图进行亚像素卷积,得到第四特征图包括:
按照目标周期从所述拼接特征图的每个通道中依次获取像素值;
基于获取的多个像素值,依次对所述拼接特征图中的多个像素点进行像素值填充,得所述第四特征图。
5.一种图像生成模型的训练方法,其特征在于,包括:
获取第一样本图像和第一目标图像,所述第一目标图像的清晰度高于所述第一样本图像;
基于所述第一目标图像和所述第一样本图像,获取第一样本变换参数集,所述第一样本变换参数集为将所述第一样本图像变换为所述第一目标图像的参数集;
将第二样本图像输入待训练的第二图像生成模型,对所述第二样本图像进行特征提取,得到与所述第二样本图像对应的第一特征图,所述第一样本图像为对所述第二样本图像进行下采样得到的图像;
基于所述第一特征图和所述第一样本变换参数集,生成第二样本变换参数集,所述第二样本变换参数集用于提高所述第二样本图像的清晰度;
基于所述第二样本图像和第二目标图像,获取第三样本变换参数集,所述第三样本变换参数集是将所述第二样本图像变换为所述第二目标图像的样本变换参数集,所述第二样本图像为对所述第二目标图像进行退化处理后的得到的样本图像;
基于所述第二样本变换参数集和所述第三样本变换参数集之间的第一差异信息,对所述第二图像生成模型的模型参数进行调整。
6.一种图像生成装置,其特征在于,包括:
第一图像输入单元,被配置为执行将第一图像输入第一图像生成模型,对所述第一图像进行图像处理,输出第一处理图像,所述第一处理图像的清晰度高于所述第一图像;
第一变换参数集获取单元,被配置为执行基于所述第一处理图像和所述第一图像,获取第一变换参数集,所述第一变换参数集为将所述第一图像变换为所述第一处理图像的参数集;
第二图像输入单元,被配置为执行将第二图像输入第二图像生成模型,对所述第二图像进行特征提取,得到与所述第二图像对应的第一特征图,所述第一图像为对所述第二图像进行下采样得到的图像;
第二变换参数集生成单元,被配置为执行基于所述第一特征图和所述第一变换参数集,生成第二变换参数集,所述第二变换参数集用于提高所述第二图像的清晰度;
图像输出单元,被配置为执行采用所述第二变换参数集中的变换参数对所述第二图像进行线性变换,输出目标图像。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110604131.0/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序