[发明专利]人脸表情检测方法、装置、头戴显示设备及存储介质

说明书

本申请公开了人脸表情检测方法、装置、头戴显示设备及存储介质。人脸表情检测方法，应用于头戴显示设备，包括：获取头戴显示设备中相机采集的面部特征图像；利用预先训练完成的面部特征模型，识别所述面部特征图像中的特征点并提取特征点的图像坐标值；根据相机与人脸间的距离以及所述特征点的图像坐标值，对所述特征点进行坐标变换，确定虚拟3D人脸上与所述特征点对应的目标特征点的三维坐标数据，得到人脸表情检测结果。本申请实施例填补了头戴显示设备不具有人脸面部表情识别、检测功能的技术空白，方便检测用户的面部表情，增强了虚实合一的沉浸感，提高了头戴显示设备的市场竞争力。

技术领域

本申请涉及头戴显示设备技术领域，尤其涉及人脸表情检测方法、装置、头戴显示设备及存储介质。

背景技术

在头戴显示设备，比如VR(Virtual Reality，虚拟现实)设备、MR(Mixed Reality，混合现实)设备中，用户与虚拟场景或者混合现实场景进行高紧密交互，在用户和场景进行人机交互时，一般是获取用户头部转动、位置移动的追踪数据，或者通过给用户佩戴手柄或者进行裸手交互追踪以解决用户和虚拟场景中手部的交互。在一些场景下，特别是多人大空间交互系统里，多人在一个虚拟场景里进行互动，如果能获取和应用人脸面部表情进而完成互动将极大增强虚实合一的沉浸感。但是目前大多数头显厂商的研究焦点都集中在如何解决用户头部的追踪信息和手柄的追踪数据，人脸面部表情识别检测还处于空白状态。

发明内容

本申请实施例提供了人脸表情检测方法、装置、头戴显示设备及存储介质，填补了头戴显示设备不具有人脸面部表情识别功能的技术空白，方便检测用户的面部表情，增强虚实合一的沉浸感。

本申请实施例采用下述技术方案：

第一方面，本申请实施例提供一种人脸表情检测方法，应用于头戴显示设备，包括：

获取头戴显示设备中相机采集的面部特征图像；

利用预先训练完成的面部特征模型，识别所述面部特征图像中的特征点并提取特征点的图像坐标值；

根据相机与人脸间的距离以及所述特征点的图像坐标值，对所述特征点进行坐标变换，确定虚拟3D人脸上与所述特征点对应的目标特征点的三维坐标数据，得到人脸表情检测结果。

第二方面，本申请实施例还提供一种人脸表情检测装置，应用于头戴显示设备，包括：

图像获取模块，用于获取头戴显示设备中相机采集的面部特征图像；

特征定位模块，用于利用预先训练完成的面部特征模型，识别所述面部特征图像中的特征点并提取特征点的图像坐标值；

表情检测模块，用于根据相机与人脸间的距离以及所述特征点的图像坐标值，对所述特征点进行坐标变换，确定虚拟3D人脸上与所述特征点对应的目标特征点的三维坐标数据，得到人脸表情检测结果。

第三方面，本申请实施例还提供一种头戴显示设备，包括：处理器；以及被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行本申请实施例第一方面所述方法。

第四方面，本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储一个或多个程序，所述一个或多个程序当被包括多个应用程序的头戴显示设备执行时，使得所述头戴显示设备执行本申请实施例第一方面所述方法。