[发明专利]一种三维人脸的图像处理方法及装置

权利要求书

1.一种三维人脸的图像处理方法，其特征在于，应用于移动终端，所述方法包括：

接收对目标图像中的人脸区域进行图像处理的请求；

将所述目标图像输入预先训练得到的沙漏网络模型；其中，所述沙漏网络模型是通过将深度网络模型的残差模块进行二值化卷积处理得到的深度网络模型，且所述沙漏网络模型是基于三维人脸特征点数据库训练得到的；

基于所述沙漏网络模型，定位所述人脸区域的三维特征点；

基于定位出的所述人脸区域的三维特征点，对所述人脸区域进行图像处理。

2.根据权利要求1所述的方法，其特征在于，

所述残差模块具体包括多个卷积模块，且所述卷积模块为二值化位运算卷积模块。

3.根据权利要求2所述的方法，其特征在于，

所述残差模块包括多个分支，每一所述分支上设置有至少一个所述卷积模块，且所述残差模块的输出值为所述多个分支的输出值的连接。

4.根据权利要求3所述的方法，其特征在于，所述残差模块包括：第一分支、第二分支和第三分支，其中：

所述第一分支上设置有第一卷积模块；

所述第二分支上设置有所述第一卷积模块和第二卷积模块，且所述第二卷积模块的输入值为所述第一卷积模块的输出值；

所述第三分支上设置有所述第一卷积模块、所述第二卷积模块和第三卷积模块，且所述第二卷积模块的输入值为所述第一卷积模块的输出值，所述第三卷积模块的输入值为所述第二卷积模块的输出值；以及

所述第一卷积模块、所述第二卷积模块和所述第三卷积模块的卷积核的大小均大于1。

5.根据权利要求1所述的方法，其特征在于，所述基于定位出的所述人脸区域的三维特征点，对所述人脸区域进行图像处理，包括：

将UV图的坐标与所述目标图像中所述人脸区域的三维特征点的坐标对齐，所述UV图为具有预设美妆纹理效果的图像；

将所述UV图投影到对齐后的所述目标图像中。

6.根据权利要求5所述的方法，其特征在于，在所述将所述UV图投影到对齐后的所述目标图像中之前，所述方法还包括：

确定所述目标图像中所述人脸区域的遮挡部分；

将所述UV图中与所述遮挡部分对应的部分进行切除。

7.一种三维人脸的图像处理装置，其特征在于，应用于移动终端，所述装置包括：

接收模块，用于接收对目标图像中的人脸区域进行图像处理的请求；

输入模块，用于将所述目标图像输入预先训练得到的沙漏网络模型；其中，所述沙漏网络模型是通过将深度网络模型的残差模块进行二值化卷积处理得到的深度网络模型，且所述沙漏网络模型是基于三维人脸特征点数据库训练得到的；

定位模块，用于基于所述沙漏网络模型，定位所述人脸区域的三维特征点；

美妆模块，用于基于定位出的所述人脸区域的三维特征点，对所述人脸区域进行图像处理。

8.根据权利要求7所述的装置，其特征在于，

所述残差模块具体包括多个卷积模块，且所述卷积模块为二值化位运算卷积模块。

9.根据权利要求8所述的装置，其特征在于，所述残差模块包括多个分支，每一所述分支上设置有至少一个所述卷积模块，且所述残差模块的输出值为所述多个分支的输出值的连接。

10.根据权利要求9所述的装置，其特征在于，所述残差模块包括：第一分支、第二分支和第三分支，其中：

所述第一分支上设置有第一卷积模块；

所述第二分支上设置有所述第一卷积模块和第二卷积模块，且所述第二卷积模块的输入值为所述第一卷积模块的输出值；

所述第三分支上设置有所述第一卷积模块、所述第二卷积模块和第三卷积模块，且所述第二卷积模块的输入值为所述第一卷积模块的输出值，所述第三卷积模块的输入值为所述第二卷积模块的输出值；以及

所述第一卷积模块、所述第二卷积模块和所述第三卷积模块的卷积核的大小均大于1。