[发明专利]一种基于2D图像的虚拟试衣方法

说明书

本发明公开了一种基于2D图像的虚拟试衣方法，涉及虚拟试衣技术领域。本发明方法包括：输入虚拟试衣需要的图像数据，经过预处理操作生成试穿区域语义图、非试穿区域语义图和服装修正图；经过端到端的语义拼接网络，在引入集成判别器和多层次损失函数的约束下，生成试穿后的人体语义分割图；通过服装变形网络，在引入频域分类器和正则约束损失函数的约束下，预测出变形后的服装图像；将试穿者图像和变形后的服装图像拼接得到粗糙的试穿结果图；经过归一化网络计算并缩小伪影区域，最终得到精细的试穿结果图。本发明方法解决现有技术中服装与人体错位产生伪影的问题，使得生成的图片保持更多的细节，生成高分辨率的试衣图片。

技术领域

本发明涉及虚拟试衣技术领域，并且更具体地，涉及一种基于2D图像的虚拟试衣方法。

背景技术

近年来，随着数字技术的快速发展和人工智能技术的不断升级，为虚拟试衣技术的发展提供了重要动力和支撑。“宅经济”悄然兴起，日常购衣也纷纷转至线上。虚拟试衣的出现可以使卖方更客观地展示服饰优缺点，使交易双方可以更为直观地了解信息，促成交易，减少不必要的工作量，提高工作效率，满足用户需求。

目前，国内外很多研究机构都在做相关研究，但是针对2D的合成图像仍然局限于低分辨率，这是影响在线消费者满意度的关键因素。随着图像分辨率的增加，变形后的服装与人体之间未对齐区域的伪影在最终结果中变得明显，最终结果中的身体部位和衣服的纹理清晰度方面表现不佳，严重影响了试衣效果。

公开号为CN 112232914A的中国专利公开了“基于2D图像的四阶段虚拟试衣方法及装置”，通过预测试衣后的语义分割图和手臂图像，来辅助生成试穿合成图像，解决了现有技术中存在的不吻合有伪影的问题，但该技术不能实现在高分辨2D图像的虚拟试衣，对高分辨率图像的纹理清晰度保持效果不佳。

发明内容

针对现有技术的以上缺陷或改进需求，本发明提供了一种基于2D图像的虚拟试衣方法，其目的在于解决高分辨率试衣图像中出现伪影的问题，保持更多的纹理细节，提高试衣效果。

为实现上述目的，按照本发明的一个方面，提供了一种基于2D图像的虚拟试衣方法，包括如下步骤：

（1）输入试穿者的2D图像、人体语义分割图和服装图像，经过预处理操作将人体语义分割图分为试穿语义区域和非试穿语义区域两部分，对服装图像进行掩模和修正处理，生成服装掩模图和服装修正图；

（2）输入服装语义图和非试穿区域语义图，经过端到端的语义拼接网络，在引入集成判别器和多层次损失函数的约束下，生成试穿后的人体语义分割图；

（3）根据试穿后的语义分割图、人体姿态图和服装图像，通过服装变形网络，在引入频域分类器和正则约束损失函数的约束下，预测出变形后的服装图像；

（4）根据试穿者图像，对非试穿区域语义图进行着色得到非试穿区域彩色图，再与变形后的服装图像进行拼接得到粗糙的试穿结果图；

（5）将粗糙的试穿结果图和试穿后的语义分割图输入到归一化网络中，计算并缩小伪影区域，最终得到精细的试穿结果图。