[发明专利]一种虚拟试衣方法、装置及存储介质

说明书

本发明公开了一种虚拟试衣方法、装置及存储介质，涉及服装技术领域。包括：采集模特图，对所述模特图进行区域分割，并检测模特图的第一关键点；获取服饰图，对所述服饰图进行分割，并将所述服饰图进行分类，获得第一类别服饰图；检测所述第一类别服饰图上的第二关键点；通过所述第一关键点和所述第二关键点的匹配，将所述模特图与所述第一类别服饰图贴合，获得试衣效果图。本发明能够打造出精准真实的试穿效果，基于对不同种类的服饰进行了精细划分，适用于不同种类的服饰；达到了快速识别、生成、匹配及人衣合成的试衣装置，为用户创造了良好的试衣体验。

技术领域

本发明涉及服装技术领域，具体涉及一种虚拟试衣方法、装置及存储介质。

背景技术

目前，虚拟试衣的研究一直本行业的研究热点，解决服装的在线试穿需求已经变得越来越受到大家的青睐。而且通过结合3D建模、增强现实、虚拟现实、人工智能等诸多前沿技术，使得各大线上线下零售以及电商供公司为用户构建了一个沉浸式购物环境。

在早期，试衣的工作处理通常使用三维测量以及建模的方法来解决，近年来计算机视觉技术的不断发展，国内外一些研究院和工业界也开展各种针对试衣算法的研究工作，但是实际研究出来的虚拟试衣装置都存在以下问题：二维试衣效果偏平面，没有真实试衣的立体效果；三维试衣方法需要拍摄及建模，成本高且效果不佳；模拟过程中仅仅采用分割方案，服饰信息不够干净，试穿效果差；目前公开的关键点和分割训练规模有限且质量不高，难以覆盖实际场景中的各类服饰。

因此，亟需一种能够建立在大量的数据积累以及精准的图像算法的前提下，构建一种计算成本低能够适宜用户使用的虚拟试衣技术。

发明内容

为了解决上述背景技术中提到的至少一个问题，本发明提供了一种虚拟试衣方法、装置及存储介质，能够打造出精准真实的试穿效果，基于对不同种类的服饰进行了精细划分，适用于不同种类的服饰；达到了快速识别、生成、匹配及人衣合成的试衣装置，为用户创造了良好的试衣体验。

本发明实施例提供的具体技术方案如下：

第一方面，提供一种虚拟试衣方法，包括：

采集模特图，对所述模特图进行区域分割，并检测模特图的第一关键点；

获取服饰图，对所述服饰图进行分割，并将所述服饰图进行分类，获得第一类别服饰图；

检测所述第一类别服饰图上的第二关键点；

通过所述第一关键点和所述第二关键点的匹配，将所述模特图与所述第一类别服饰图贴合，获得试衣效果图。

进一步的，所述方法还包括：在将所述模特图与所述第一类别服饰图贴合后，判断贴合后图像是否有暴露皮肤区域；

若有，则裁剪掉所述暴露皮肤区域，获得所述试衣效果图；

若没有，则直接获得所述试衣效果图。

进一步的，所述方法还包括：对所述模特图进行区域分割，并检测所述模特图的第一关键点，具体包括：

通过hrnet分割模型，将所述模特图至少分割为背景、头发、手臂、上身、腰部以及腿部区域，基于hrnet关键点检测模型，检测出所述模特图上的关键部位的第一关键点。

进一步的，所述方法还包括：在获得所述试衣效果图后，基于所述第一类别服饰图的结构特征和材质特性，优化所述试衣效果图。

进一步的，所述获取服饰图包括：通过efficientNet识别模型，从数据库中获取一张图片，抽取该图片的特征，然后对所述图片的特征进行识别，获得具有3D效果的所述服饰图。

进一步的，对服饰图进行分割，并将所述服饰图进行分类，获得第一类别服饰图，具体包括：