[发明专利]一种人脸关键点定位方法、装置、终端及存储介质

权利要求书

1.一种人脸关键点定位方法，其特征在于，包括：

实时获取人脸图像信息；

采用轻量级坐标回归网络模型对所述人脸图像信息进行关键点定位并输出关键点定位信息；

其中，所述轻量级坐标回归网络模型采用SE-Sandglass结构作为主干网络。

2.根据权利要求1所述的一种人脸关键点定位方法，其特征在于：所述SE-Sandglass结构包括Sandglass结构和SE结构，将所述Sandglass结构和SE结构进行串联结合。

3.根据权利要求2所述的一种人脸关键点定位方法，其特征在于：所述Sandglass结构包括依次串联的第一深度卷积、第一逐点卷积、第二逐点卷积和第二深度卷积，所述第一深度卷积和第二逐点卷积后使用非线性激活函数ReLU6，所述第一逐点卷积和第二深度卷积后使用线性激活。

4.根据权利要求2所述的一种人脸关键点定位方法，其特征在于：所述SE结构包括采用GAP进行Fsq压缩操作和采用FC进行Fex捕获操作。

5.根据权利要求1所述的一种人脸关键点定位方法，其特征在于：所述轻量级坐标回归网络模型包括依次串联的若干个第一卷积、若干个SE-Sandglass结构、若干个第二卷积、一个GDC结构、若干个第三卷积和一个FC全连接结构。

6.根据权利要求1所述的一种人脸关键点定位方法，其特征在于，在获取人脸图像信息之前还包括：将训练集样本按照角度分类，并根据各个角度中的样本数量进行样本数据平衡。

7.根据权利要求6所述的一种人脸关键点定位方法，其特征在于，所述将训练集样本按照角度分类，并根据各个角度中的样本数量进行样本数据平衡，具体包括：

将若干张正脸的平均值作为预定义的标准脸；

在所述标准脸上固定若干个关键点坐标作为所有样本的固定参考点；

根据所述若干个固定参考点在每张样本上一一找出对应的对照点；

针对每张样本，利用所述若干个固定参考点和对照点通过SolvePnp估算一个旋转矩阵，并从所述旋转矩阵中解算出角度，从而获得每张样本对应的角度；

根据所述每张样本对应的角度将各个样本按角度进行分类并统计数量；

复制样本数量较少的分类中的样本来平衡训练数据。

8.一种人脸关键点定位装置，其特征在于，包括：

存储器，用于存储人脸关键点定位程序；

处理器，在运行所述人脸关键点定位程序时执行权利要求1-8任一项所述人脸关键点定位方法的步骤。

9.一种人脸关键点定位终端，其特征在于，包括：

图像采集装置，用于采集人脸图像信息；

驾驶状态检测装置，用于检测驾驶人员的驾驶状态；

如权利要求8所述的人脸关键点定位装置，输入端连接所述图像采集装置，输出端连接所述驾驶状态检测装置。

10.一种计算机可读存储介质，其特征在于，存储有能够被处理器加载并执行权利要求1至7中任一项所述人脸关键点定位方法的计算机程序。