[发明专利]一种基于二分类标签的人像物件的自动增删方法及装置在审
申请号: | 202110761565.1 | 申请日: | 2021-07-06 |
公开(公告)号: | CN113689324A | 公开(公告)日: | 2021-11-23 |
发明(设计)人: | 徐枫;吕军锋 | 申请(专利权)人: | 清华大学 |
主分类号: | G06T3/00 | 分类号: | G06T3/00;G06T11/60;G06K9/00;G06K9/34;G06N3/08 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 张梦瑶 |
地址: | 10008*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 分类 标签 人像 物件 自动 增删 方法 装置 | ||
本发明提出一种基于二分类标签的人像物件的自动增删方法方法和装置,其中,包括:接收人像物件的自动增删请求,确定人像物件的自动增删请求中包括的至少一种人像物件的类型;获取至少一张待修改的人脸图像和至少一张参考人脸图像;对待修改的人脸图像和参考人脸图像进行特征点检测;通过预先训练完成的神经网络中的类型的人像物件的增删模块,确定待修改的人脸图像和参考人脸图像对于类型的人像物件的二分类标签;根据待修改的人脸图像和参考人脸图像的人像物件特征确定所修改的人脸图像的目标人像物件增删方式,根据目标人像物件增删方式对待修改的人脸图像进行修改。本申请提出的方法可以自动化地增删对应的人像物件,便捷性高且训练成本低。
技术领域
本发明涉及计算机视觉技术领域,尤其涉及一种仅利用二分类标签训练人像物件增删网络方法。
背景技术
人像编辑是计算机视觉的一项重要应用,目前人们对人像照片编辑的便捷性也有了更高的需求。相关技术中通常是通过基于深度学习的自动化方法或通用的图像编辑方法进行人像编辑。
但多数基于深度学习的自动化方法都严重依赖于监督数据。例如,想要训练一个增删眼镜的网络,可能需要人工提供眼镜的语义分割结果作为监督数据。这种监督数据需要大量的人工标注,导致训练成本很高。
通用的图像编辑方法(如图像编辑软件、图像补全技术等)虽然能够做到精确的人像编辑,但它们都依赖于用户的输入。例如,用户想要把人像一上的眼镜添加到人像二上,就需要人工把人像一的眼镜先分割出来,放置在人像二的合理位置上,最后做一些平滑处理。这些操作不仅繁琐,而且往往需要用户具有较高的专业水平才能编辑出高质量的人像。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的第一个目的在于提出一种基于二分类标签的人像物件的自动增删方法,以实现人像物件的自动增删,为用户提供方便。
本发明的第二个目的在于提出一种基于二分类标签的人像物件的自动增删装置。
本发明的第三个目的在于提出一种非临时性计算机可读存储介质。
为达上述目的,本发明第一方面实施例提出了一种基于二分类标签的人像物件的自动增删方法,包括以下步骤:
接收人像物件的自动增删请求,并确定所述人像物件的自动增删请求中包括的至少一种人像物件的类型;
获取至少一张待修改的人脸图像和至少一张参考人脸图像;
对所述待修改的人脸图像和所述参考人脸图像进行特征点检测,以获取所述待修改的人脸图像和所述参考人脸图像的人脸特征点;
通过预先训练完成的神经网络中的所述类型的人像物件的增删模块,确定所述待修改的人脸图像和所述参考人脸图像对于所述类型的人像物件的二分类标签,并根据所述人脸特征点和所述二分类标签,确定所述待修改的人脸图像的人像特征和所述类型的人像物件的人像物件特征,以及所述参考人脸图像的所述类型的人像物件的人像物件特征;
根据所述待修改的人脸图像和所述参考人脸图像的人像物件特征确定所述待修改的人脸图像的目标人像物件增删方式,并根据所述目标人像物件增删方式对所述待修改的人脸图像进行修改。
可选地,在本申请的一个实施例中,在所述接收人像物件的自动增删请求之前,还包括:
获取第一人脸图像组和第二人脸图像组,所述第一人脸图像组包括多张包含所述类型的人像物件的人脸图像,所述第二人脸图像组包括多张不包含所述类型的人像物件的人脸图像;
对所述第一人脸图像组和所述第二人脸图像组进行特征点检测,以获取所述第一人脸图像组和所述第二人脸图像组中各张人脸图像的人脸特征点;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110761565.1/2.html,转载请声明来源钻瓜专利网。