[发明专利]一种图像处理方法、装置、存储介质和电子设备在审
申请号: | 202010595234.0 | 申请日: | 2020-06-28 |
公开(公告)号: | CN111598968A | 公开(公告)日: | 2020-08-28 |
发明(设计)人: | 余自强 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06T11/00 | 分类号: | G06T11/00;G06K9/34;G06K9/46;G06N3/04;G06N3/08 |
代理公司: | 深圳翼盛智成知识产权事务所(普通合伙) 44300 | 代理人: | 李汉亮 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 图像 处理 方法 装置 存储 介质 电子设备 | ||
1.一种图像处理方法,其特征在于,包括:
获取源图像和目标场景;
对所述源图像进行语义分割,得到表征图像语义信息的语义特征图像;
基于所述目标场景,对所述语义特征图像进行多个尺度的特征处理,得到符合所述目标场景的样本效果图像;
对所述源图像进行多分辨率的特征提取,得到多分辨率特征图像,所述多分辨率特征图像包括多种分辨率下的图像特征信息;
通过效果转换网络,基于所述样本效果图像、所述源图像,对所述多分辨率特征图像进行效果转换,得到目标效果图像;
基于所述多分辨率特征图像与所述源图像之间的内容损失、以及所述多分辨率特征图像与所述样本效果图像之间的效果损失,对所述效果转换网络的网络参数进行参数调整;
当所述网络参数满足预设条件时,输出当前的目标效果图像。
2.根据权利要求1所述的图像处理方法,其特征在于,基于所述目标场景,对所述语义特征图像进行多个尺度的特征处理,得到符合所述目标场景的样本效果图像,包括:
将所述语义特征图像与图像噪声信息进行信息组合,得到第二尺度输入图像;
对所述第二尺度输入图像进行下采样操作,得到第一尺度输入图像;
通过场景图像生成网络,基于所述目标场景,对所述第一尺度输入图像、以及所述第二尺度输入图像进行特征处理,得到符合所述目标场景的样本效果图像。
3.根据权利要求2所述的图像处理方法,其特征在于,所述场景图像生成网络包括第一尺度图像生成网络、以及第二尺度图像生成网络;
通过场景图像生成网络,基于所述目标场景,对所述第一尺度输入图像、以及所述第二尺度输入图像进行特征处理,得到符合所述目标场景的样本效果图像,包括:
通过所述第一尺度图像生成网络,基于所述目标场景对所述第一尺度输入图像进行第一尺度的特征处理,得到第一尺度特征图像;
通过所述第二尺度图像生成网络,基于所述目标场景、以及所述第一尺度特征图像,对所述第二尺度输入图像进行第二尺度的特征处理,得到符合所述目标场景的样本效果图像。
4.根据权利要求3所述的图像处理方法,其特征在于,所述第一尺度图像生成网络包括第一卷积层、以及多个第一残差块;
通过所述第一尺度图像生成网络,基于所述目标场景对所述第一尺度输入图像进行第一尺度的特征处理,得到第一尺度特征图像,包括:
基于所述第一尺度图像生成网络的第一卷积层,对所述第一尺度输入图像进行特征提取,得到初始第一尺度特征图像;
将所述目标场景输入至所述第一尺度图像生成网络的每个第一残差块中;
基于多个所述第一残差块,将所述目标场景融合至所述初始第一尺度特征图像中,得到第一尺度特征图像。
5.根据权利要求3所述的图像处理方法,其特征在于,所述第二尺度图像生成网络包括第二卷积层、以及多个第二残差块;
通过所述第二尺度图像生成网络,基于所述目标场景、以及所述第一尺度特征图像,对所述第二尺度输入图像进行第二尺度的特征处理,得到符合所述目标场景的样本效果图像,包括:
基于所述第二尺度图像生成网络的第二卷积层,对所述第二尺度输入图像进行特征提取,得到初始第二尺度特征图像;
将所述初始第二尺度特征图像和所述第一尺度特征图像进行图像融合,得到融合后第二尺度特征图像;
将所述目标场景输入至所述第二尺度图像生成网络的每个第二残差块中;
基于多个所述第二残差块,将所述目标场景融合至所述融合后第二尺度特征图像中,得到符合所述目标场景的样本效果图像。
6.根据权利要求1所述的图像处理方法,其特征在于,所述方法还包括:
获取用于训练图像生成网络的样本图像,所述图像生成网络包括场景图像生成网络和场景图像判别网络;
将所述样本图像输入至所述图像生成网络中,并通过所述场景图像生成网络和所述场景图像判别网络的交替迭代训练,调整所述场景图像生成网络和所述场景图像判别网络的网络参数直至收敛。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010595234.0/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序