[发明专利]眼睑线检测方法、装置和电子设备

说明书

本申请实施方式公开了一种眼睑线检测方法、装置、电子设备以及计算机可读存储介质，其中的眼睑线检测方法包括：检测图像的人脸关键点；根据所述人脸关键点分割所述图像中的眼部区域图像；将所述眼部区域图像输入第一神经网络，并经所述第一神经网络输出用于表示所述眼部区域图像中的眼睑线的检测结果；其中，所述第一神经网络基于训练图像集预先训练完成。

技术领域

本申请涉及计算机视觉技术，尤其是涉及一种眼睑线检测方法、眼睑线检测装置、训练用于眼睑线检测的神经网络的方法、训练用于眼睑线检测的神经网络的装置、计算机可读存储介质、计算机程序以及电子设备。

背景技术

人脸关键信息的检测是人脸的图像渲染、人脸识别人脸属性检测等诸多应用中不可或缺的一部分。准确的确定出人脸关键信息，不仅有利于对人脸的相关位置进行矫正，而且有利于增强人脸的语义信息。

发明内容

本申请实施方式提供一种眼睑线检测以及训练用于眼睑线检测的神经网络的技术方案。

根据本申请实施方式的其中一个方面，提供了一种眼睑线检测方法，该方法包括：检测图像的人脸关键点；根据所述人脸关键点分割所述图像中的眼部区域图像；将所述眼部区域图像输入第一神经网络，并经所述第一神经网络输出用于表示所述眼部区域图像中的眼睑线的检测结果；其中，所述第一神经网络基于训练图像集预先训练完成。

在本申请一个实施方式中，所述人脸关键点包括眼睛关键点，所述眼睛关键点包括以下至少之一：瞳孔关键点、眼眶关键点、眼睛中心关键点、眼角关键点；所述根据所述人脸关键点分割所述图像中的眼部区域图像，包括：根据所述眼睛关键点分割所述图像中的眼部区域图像。

在本申请又一个实施方式中，所述用于表示所述眼部区域图像中的眼睑线的检测结果包括：由单眼上眼睑处或下眼睑处预定数量的关键点表示的轨迹信息或拟合线。

在本申请再一个实施方式中，所述第一神经网络的训练方法包括：获取训练图像集中的图像样本中的眼睛图像块以及所述眼睛图像块的噪声图像块；将所述眼睛图像块和噪声图像块分别输入至第一神经网络，经所述第一神经网络提取所述眼睛图像块中的第一眼睑线关键点以及所述噪声图像块中的第二眼睑线关键点；根据所述第一眼睑线关键点和第二眼睑线关键点计算眼睑线关键点的第一漂移信息；至少以所述第一漂移信息为监督信息，对所述第一神经网络进行监督学习。

在本申请再一个实施方式中，所述眼睛图像块的噪声图像块的获取方式包括：针对所述眼睛图像块进行数据增强处理，以获得所述眼睛图像块的噪声图像块。

在本申请再一个实施方式中，所述针对眼睛图像块进行数据增强处理包括下述至少一个：针对眼睛图像块进行旋转处理；针对眼睛图像块进行水平和/或垂直方向上的平移处理；针对眼睛图像块进行放大/缩小处理。

在本申请再一个实施方式中，所述第一/第二眼睑线关键点包括：单眼位于上眼睑处的10-15个关键点，和/或，单眼位于下眼睑处的10-15个关键点。

在本申请再一个实施方式中，所述根据所述第一眼睑线关键点和第二眼睑线关键点计算眼睑线关键点的第一漂移信息包括：基于预定坐标系对所述第一眼睑线关键点的关键点坐标信息和/或第二眼睑线关键点的关键点坐标信息进行坐标变换；根据所述第一眼睑线关键点和第二眼睑线关键点各自的关键点编号以及变换后的关键点坐标信息，计算具有相同关键点编号的至少一组眼睑线关键点之间的漂移向量；其中，所述第一漂移信息包括所述漂移向量。

在本申请再一个实施方式中，所述预定坐标系包括：眼睛图像块的坐标系。