[发明专利]图像处理方法及装置有效
申请号: | 201711455985.7 | 申请日: | 2017-12-28 |
公开(公告)号: | CN107948529B | 公开(公告)日: | 2020-11-06 |
发明(设计)人: | 涂治国;张轩哲;李涛 | 申请(专利权)人: | 麒麟合盛网络技术股份有限公司 |
主分类号: | H04N5/232 | 分类号: | H04N5/232 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 姜凤岩 |
地址: | 100085 北京市海淀区信息路2号(北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 图像 处理 方法 装置 | ||
1.一种图像处理方法,其特征在于,应用于移动终端,包括:
获取待处理图像,将所述待处理图像输入至图像处理模型,调用所述图像处理模型中的编码单元,对所述待处理图像进行编码,得到所述待处理图像对应的特征图;
根据用户的触发操作确定所述待处理图像对应的目标风格;其中,所述目标风格为用户触发的图像风格;
在所述图像处理模型包含的多个处理单元中,实时选取所述目标风格对应的目标处理单元,并调用所述目标处理单元按照所述目标风格对所述特征图进行风格化处理,得到处理后的特征图;其中,每个所述处理单元对应一种图像风格;
调用所述图像处理模型中的解码单元,对所述处理后的特征图进行解码,得到所述待处理图像对应的风格化图像,处理得到的风格化图像包括待处理图像的内容和目标风格;
其中,调用所述目标处理单元按照所述目标风格对所述特征图进行风格化处理,得到处理后的特征图,包括:
将所述特征图输入至所述图像处理模型中的所述目标处理单元;
将所述目标处理单元的处理结果,作为处理后的特征图;
其中,所述目标处理单元包括交替设置的多层第一卷积运算层和多层实时归一化处理层,所述目标处理单元用于,按照所述目标风格,对所述特征图分别进行第一预设次数的第一卷积运算和实时归一化处理。
2.根据权利要求1所述的方法,其特征在于,还包括:
获取训练样本图,调用所述图像处理模型中的编码单元,分别对所述训练样本图进行编码,得到所述训练样本图对应的样本特征图;
对所述样本特征图依次进行所述第一卷积运算和所述实时归一化处理,得到第一处理结果;
根据预设的损失函数,计算所述第一处理结果与预设处理结果之间的损失差值;其中,所述预设的损失函数为内容损失函数、风格损失函数和整体方差损失函数的线性组合;
重复执行所述第一卷积运算、所述实时归一化处理、所述损失差值计算的步骤,直至当次计算得到的损失差值与前次计算得到的损失差值满足预设大小要求;
将重复所述第一卷积运算、所述实时归一化处理、所述损失差值计算的步骤所对应的次数,确定为所述第一预设次数。
3.根据权利要求1所述的方法,其特征在于,调用所述图像处理模型中的解码单元,对所述处理后的特征图进行解码,得到所述待处理图像对应的风格化图像,包括:
将所述处理后的特征图输入至所述解码单元;
将所述解码单元的处理结果,确定为所述待处理图像对应的风格化图像;
其中,所述解码单元用于,基于最近临采样的方式对所述处理后的特征图进行放大处理,以及对放大后的所述处理后的特征图进行第二卷积运算,生成中间图像。
4.根据权利要求3所述的方法,其特征在于,所述解码单元在生成所述中间图像之后,还包括:
确定所述中间图像的各个像素块的像素值的平均值和方差;
根据所述平均值和所述方差,分别对所述中间图像的各个像素块对应的像素值进行归一化调整。
5.根据权利要求1所述的方法,其特征在于,确定所述待处理图像对应的目标风格,包括:
将所述待处理图像划分为多个图像单元,分别确定每个所述图像单元各自对应的目标风格;
调用所述目标处理单元按照所述目标风格对所述特征图进行风格化处理,包括:
在所述图像处理模型包含的多个处理单元中,选取每个所述图像单元各自对应的目标风格所对应的目标处理单元;
从所述特征图中,提取得到每个所述图像单元各自对应的单元特征图;
调用选取的各个所述目标处理单元,按照各自对应的图像风格,分别对相应的所述单元特征图各自进行风格化处理,得到处理后的特征图。
6.根据权利要求2所述的方法,其特征在于,所述第一卷积运算包括深度可分离的卷积运算和逐像素可分离的卷积运算。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于麒麟合盛网络技术股份有限公司,未经麒麟合盛网络技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711455985.7/1.html,转载请声明来源钻瓜专利网。
- 彩色图像和单色图像的图像处理
- 图像编码/图像解码方法以及图像编码/图像解码装置
- 图像处理装置、图像形成装置、图像读取装置、图像处理方法
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像解密方法、图像加密方法、图像解密装置、图像加密装置、图像解密程序以及图像加密程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序以及图像解码程序
- 图像编码方法、图像解码方法、图像编码装置、图像解码装置、图像编码程序、以及图像解码程序
- 图像形成设备、图像形成系统和图像形成方法
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序
- 图像编码装置、图像编码方法、图像编码程序、图像解码装置、图像解码方法及图像解码程序