[发明专利]一种虚拟试妆指导方法及装置

权利要求书

1.一种虚拟试妆指导方法，其特征在于，包括以下步骤：

S1.获取目标用户不低于三张面部图像，根据用户面部特征推荐不同妆面效果至第一试妆区域；所述目标用户的面部图像包括目标的人脸图像，还包括特征部位，即唇部、眉毛区域、眼部周围的区域、脸部区域；获取用户图像时，还包括获取用户面部表情，不同角度的照片，以便形成用户的面部的3D模型图；获取用户图像时，还包括获取特征部位的不同动作和状态下的图像；唇部获取以下动作：抿嘴、闭嘴、瘪嘴、微张口、大张口、微笑、大笑的动作状态，对于眉毛区域，获取眉毛皱眉、挑眉、正常眉的情况；对于眼睛周围，获取眼睛闭眼、眨眼、眯眼、瞪眼状态下的动作状态；

S2.确定目标用户选择的妆面效果；

S3.获取目标用户的化妆的特征部位的效果并将特征部位效果映射到第二试妆区域；

S4.从预先建立的模板库中选择3D的面部模板，并将所述面部模板映射到试妆设备上的第二试妆区域；

S5.获取目标用户的面部动作图并将面部动作图映射到第三试妆区域；

S6.从预先建立的模板库中选择面部动作相对应的模板映射到试妆设备上的第三试妆区域；

S7.对比所述选择的妆面效果与第二试妆区域的化妆效果，提示目标用户进行妆面修改；所述试妆区域包括第一试妆区域、第二试妆区域和第三试妆区域，所述第一试妆区域用来呈现妆面效果图；第二试妆区域用来呈现当前化妆进度；第三试妆区域有镜子的功能，同时用来获取目标用户的特征部位的化妆进度，并将进度发送至第二试妆区域，通过控制中心的数据处理，第二试妆区域接收当前化妆进度并通过图像的方式呈现；

特征部位的效果映射到第二试妆区域的数据来源于所述第三试妆区域的获取的内容，当用户正在使用口红，第三试妆区域内的获取模块获取到用户当前的进度，获取的方式是根据接收到的颜色的变化，嘴部的颜色由浅变深，判断用户化妆的进度，同时，通过面部追踪的相关技术，将变化的部分由第二试妆区域去呈现；

在步骤S3中，映射到第二试妆区域时，用户的特征部位效果从所述第三试妆区域中获取图片并分析颜色代码得出；

所述方法还包括：

S21.接收妆面效果的选择指令，并确定所述选择指令对应的妆面效果的颜色代码；

S22.标记所述妆面效果图各个位置的颜色代码。

2.根据权利要求1所述的一种虚拟试妆指导方法，其特征在于，所述获取目标用户的面部动作图，包括：

S51.提取目标用户的面部动作图中的关键点。

3.根据权利要求1所述的一种虚拟试妆指导方法，其特征在于，所述选择面部动作相对应的模板映射到试妆设备上的第三试妆区域，还包括：

S61.根据面部动作的图像中的关键点，对比动作状态，选择该动作状态下相似度最高的模板。

4.根据权利要求1所述的一种虚拟试妆指导方法，其特征在于，包括：建立所述模板库，具体的，包括以下步骤：

S8.对预设用户进行人脸图像采集，得到所述预设用户的多个人脸图像集合；所述人脸图像集合包括多个动作状态下的多个人脸图像。

5.根据权利要求4所述的一种虚拟试妆指导方法，其特征在于，还包括：

S81.对预设用户进行人脸图像采集，得到每个特征部位对应的多个动作下的图像集合。

6.一种虚拟试妆指导装置，包括本体，其特征在于，还包括：获取模块，用来获取用户的面部头像和面部动作以及特征部位动作；

推荐模块，用来根据用户脸型和外出场合推荐适合目标用户的妆面效果；

确定模块，用于确定目标图像中待试妆区域的动作状态；以及用于确定用户选择的妆面效果对应的颜色编号；

模板库模块，用来存储用户的3D图像，以及存储用户的面部图片，特征部位的图片；

映射模块，用于将模板图像映射到第一试妆区域、第二试妆区域以及第三试妆区域；

提示模块，用来提示目标用户妆面的修改以及完成化妆；

颜色标记模块，用来记录不同妆面效果的色彩的颜色对应的编码；

对比模块，用来对比第二试妆区域和妆面效果的色彩是否一致；

显示模块，所述显示模块包括第一试妆区域、第二试妆区域和第三试妆区域，所述第一试妆区域用来呈现妆面效果图；第二试妆区域用来呈现当前化妆进度；第三试妆区域用来获取目标用户的特征部位的动作，并将进度发送至控制中心，通过控制中心的数据处理，第二试妆区域接收当前化妆进度并通过图像的方式呈现；还用来显示提示信息；

特征部位的效果映射到第二试妆区域的数据来源于所述第三试妆区域的获取的内容，当用户正在使用口红，第三试妆区域内的获取模块获取到用户当前的进度，获取的方式是根据接收到的颜色的变化，嘴部的颜色由浅变深，判断用户化妆的进度，同时，通过面部追踪的相关技术，将变化的部分由第二试妆区域去呈现。