[发明专利]一种人脸图像的光照检测方法、装置、设备和存储介质

说明书

本发明公开了一种人脸图像的光照检测方法、装置、设备和存储介质。其中，该方法包括：获取待检测的人脸图像以及三维人脸网格模板；根据人脸图像对三维人脸网格模板进行形变，得到重建的人脸网格模型；根据三维人脸网格模板中的关键特征点在重建的人脸网格模型中的形变位置，确定关键特征点在人脸图像中对应的特征点的亮度；根据关键特征点的预设亮度与光照的对应关系，以及，关键特征点在人脸图像中对应的特征点的亮度，确定人脸图像的光照信息。本发明实施例提供的技术方案，解决了现有技术中由于受到不同人脸图像的人脸形状的限制，通过人脸模型进行光照检测存在误差的问题，简化了人脸图像中光照检测操作，提高了光照检测的效率和准确性。

技术领域

本发明实施例涉及图像处理领域，尤其涉及一种人脸图像的光照检测方法、装置、设备和存储介质。

背景技术

随着计算机技术的快速发展，增强现实(Augmented Reality，AR)类的产品已经广泛应用到人们的日常生活中，AR产品中的虚拟内容需要无缝嵌入到真实图像中，从而给予用户一种虚拟内容真实存在的感觉。此时需要对真实图像中的环境光照进行检测，进而为虚拟对象增加同样的光照环境，提高虚拟内容与真实环境之间融合的真实性。

由于光的传播受场景中物体几何和反射率等因素的影响，目前通常下述三种方式来获取真实场景中的光照信息：

1)采用特殊的图像获取方式，如通过获取真实场景中镜面球(光探头)的图像来检测光照，采用鱼眼相机来获取全方向真实图像，或者采用深度摄像机恢复真实场景中的三维信息和光照条件，来度量真实场景的光照条件，但该种方法通常需要执行繁重的图像获取过程，操作较为复杂。

2)根据预先放置在真实场景中的预定义几何和反射属性的标记物进行光照检测：如利用乒乓球和平面标记物、方形标记物或者立方体标记物等，该方法无需执行繁重的图像获取过程，但对于预定义的几何对象和标记物具有一定要求，难以应用在各种实际场景中。

3)考虑到人脸图像具有相似的几何位置，可以利用三维人脸模型生成对应的基准光源图像，通过对人脸图像与基准光源图像进行匹配来检测光照，如通过人工标记人脸图像中的双眼位置，建立坐标系，将不同人脸图像在该双眼坐标系下位置相同的采样点作为同一几何对应点，从而根据每个几何对应点在不同人脸图像中的亮度检测光照，但是该方法需要利用三维人脸模型确定基准光源图像，由于不同人脸图像的形状会发生相应改变，此时三维人脸模型会受到不同人脸图像的人脸形状的限制，根据基准光源图像确定的几何对应点存在一定的误差，使得光照检测存在较大误差。

发明内容

本发明实施例提供了一种人脸图像的光照检测方法、装置、设备和存储介质，简化人脸图像中光照检测操作，提高光照检测的准确性。

第一方面，本发明实施例提供了一种人脸图像的光照检测方法，该方法包括：

获取待检测的人脸图像以及三维人脸网格模板；

根据所述人脸图像对所述三维人脸网格模板进行形变，得到重建的人脸网格模型；

根据所述三维人脸网格模板中的关键特征点在重建的人脸网格模型中的形变位置，确定所述关键特征点在所述人脸图像中对应的特征点的亮度；

根据所述关键特征点的预设亮度与光照的对应关系，以及，所述关键特征点在所述人脸图像中对应的特征点的亮度，确定所述人脸图像的光照信息。

进一步的，在获取待检测的人脸图像以及三维人脸网格模板之前，还包括：

获取历史人脸图像以及所述三维人脸网格模板，并确定所述历史人脸图像的历史光照信息；

根据所述历史人脸图像对所述三维人脸网格模板进行形变，得到重建的历史人脸网格模型；