[发明专利]一种图像风格迁移模型生成方法及移动终端在审
申请号: | 201810202121.2 | 申请日: | 2018-03-12 |
公开(公告)号: | CN108537776A | 公开(公告)日: | 2018-09-14 |
发明(设计)人: | 郭伟伟 | 申请(专利权)人: | 维沃移动通信有限公司 |
主分类号: | G06T7/00 | 分类号: | G06T7/00 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 王洪 |
地址: | 523860 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 迁移 图像风格 风格 模型生成 神经网络 损失函数 训练数据 移动终端 均方差 构建 待处理图像 高保真图像 迭代操作 工作负荷 结构顺序 深度感知 生成图像 输入图像 特征构建 图像空间 后置层 前置层 输出层 输入层 处理器 残差 耗时 扭曲 | ||
1.一种图像风格迁移模型生成方法,其特征在于,所述方法包括:
构建风格训练数据对,其中,每个数据对包含一个训练原图和一个风格图;
搭建结构顺序依次为输入层、前置层、至少一个残差特征构建层、后置层以及输出层的神经网络;
基于训练原图和风格图的均方差损失和深度感知特征的均方差损失,构建损失函数;
按照所述风格训练数据对和所述损失函数,对所述神经网络进行训练,生成图像风格迁移模型。
2.根据权利要求1所述的方法,其特征在于,在所述搭建结构顺序依次为输入层、前置层、至少一个残差特征构建层、后置层以及输出层的神经网络之后,所述方法还包括:
分别对所述神经网络中的所述前置层、所述后置层以及各残差特征构建层进行深度可分离卷积和点卷积处理,进行参数调整。
3.根据权利要求1所述的方法,其特征在于:
所述前置层包含五层卷积层;
所述后置层包含五层卷积层;
每个残差特征构建层均包含三层卷积层。
4.根据权利要求1所述的方法,其特征在于,所述依据所述风格训练数据对和所述损失函数,对所述神经网络进行训练,生成图像风格迁移模型,包括:
逐个将每个所述风格训练数据对输入至所述神经网络中;
对于输入的每个风格训练数据对,通过所述神经网络对所述风格训练数据对中的训练原图进行处理,得到结果图;
通过预先训练好的深层感知特征网络,对所述结果图和所述风格训练数据对中的风格图进行感知特征提取,得到感知特征图;
将所述感知特征图、所述结果图依据所述风格图代入所述损失函数,生成目标损失函数;
按照目标损失函数,调整所述神经网络的参数。
5.根据权利要求1所述的方法,其特征在于,在所述生成图像风格迁移模型之后,所述方法还包括:
将待处理图像输入至所述图像风格迁移模型;
通过所述图像风格迁移模型,对所述待处理图像进行风格迁移,输出所述待处理图像对应的风格迁移图像。
6.一种移动终端,其特征在于,所述移动终端包括:
构建模块,用于构建风格训练数据对,其中,每个数据对包含一个训练原图和一个风格图;
搭建模块,用于搭建结构顺序依次为输入层、前置层、至少一个残差特征构建层、后置层以及输出层的神经网络;
损失函数构建模块,用于基于训练原图和风格图的均方差损失和深度感知特征的均方差损失,构建损失函数;
训练模块,用于按照所述风格训练数据对和所述损失函数,对所述神经网络进行训练,生成图像风格迁移模型。
7.根据权利要求6所述的移动终端,其特征在于,所述移动终端还包括:
优化模块,用于在所述搭建模块搭建结构顺序依次为输入层、前置层、至少两个残差特征构建层、后置层以及输出层的神经网络之后,分别对所述神经网络中的所述前置层、所述后置层以及各残差特征构建层进行深度可分离卷积和点卷积处理,进行参数调整。
8.根据权利要求6所述的移动终端,其特征在于:
所述前置层包含五层卷积层;
所述后置层包含五层卷积层;
每个残差特征构建层均包含三层卷积层。
9.根据权利要求6所述的移动终端,其特征在于,所述训练模块包括:
输入子模块,用于逐个将每个所述风格训练数据对输入至所述神经网络中;
调用子模块,用于针对输入的每个风格训练数据对,通过所述神经网络对所述风格训练数据对中的训练原图进行处理,得到结果图;
分析子模块,用于通过预先训练好的深层感知特征网络,对所述结果图和所述风格训练数据对中的风格图进行感知特征提取,得到感知特征图;
生成子模块,用于将所述感知特征图、所述结果图依据所述风格图代入所述损失函数,生成目标损失函数;
调整子模块,用于按照目标损失函数,调整所述神经网络的参数。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于维沃移动通信有限公司,未经维沃移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810202121.2/1.html,转载请声明来源钻瓜专利网。