[发明专利]一种基于骨骼驱动还原口型的方法和系统

权利要求书

1.一种基于骨骼驱动还原口型的方法，其特征在于，所述方法包括：

获取目标图像，并基于目标图像确定第一颌骨关键点和第二颌骨关键点；所述第一颌骨关键点和所述第二颌骨关键点为所述目标对象的相邻骨骼关键点；

获取第一颌骨关键点在目标平面上的坐标位置，所述目标平面用于指示目标对象的骨骼关键点从三维空间映射到二维平面的相对位置关系；

确定目标平面上以面部第一颌骨关键点的坐标位置为中心点的若干个曲线，所述曲线用于指示第二颌骨关键点映射到所述目标平面上的所有可能的位置；所述曲线上的每一个点的坐标位置对应所述第二颌骨关键点在三维空间中的一个或多个角度信息；

根据面部第二颌骨关键点在所述目标平面上的坐标位置，确定所述第二颌骨关键点所属的目标曲线，所述目标曲线为所述若干个曲线中的一个；

根据所述第二颌骨关键点的坐标位置和所述目标曲线，确定所述第二颌骨关键点的空间位置；

根据二维平面投影上的一系列动作获取面部动作参数，反推出机器人口型动作。

2.如权利要求1所述的方法，其特征在于，根据二维平面投影上的一系列动作获取面部动作参数，反推出机器人口型动作，包括：

针对某一帧视频图像中的面部骨骼关键点，选择关联运动的骨骼关键点；

在所述某一帧图像中，设立二维坐标系，以上颌骨为坐标原点，预设第二颌骨关键点的多个可能出现的位置，反推出机器人口型动作。

3.如权利要求1所述的方法，其特征在于，所述方法还包括：通过相对距离表示所述第一颌骨点和第二颌骨点的距离关系；所述相对距离为所述第一颌骨关键点和所述第二颌骨关键点之间在所述图像信息上的实际距离，与所述第一颌骨关键点和所述第二颌骨关键点之间在所述图像信息上能够呈现的最大距离之比。

4.如权利要求1所述的方法，其特征在于，所述曲线上的每一个点的位置都对应该点的自由度，自由度用于结合点的二维坐标将该点的位置在三维空间中还原视频中的相应动作。

5.一种基于骨骼驱动还原口型的系统，其特征在于，所述系统包括：

颌骨关键点确定模块，用于获取目标图像，并基于目标图像确定第一颌骨关键点和第二颌骨关键点；所述第一颌骨关键点和所述第二颌骨关键点为所述目标对象的相邻骨骼关键点；

坐标位置获取模块，用于获取第一颌骨关键点在目标平面上的坐标位置，所述目标平面用于指示目标对象的骨骼关键点从三维空间映射到二维平面的相对位置关系；

曲线确定模块，用于确定目标平面上以面部第一颌骨关键点的坐标位置为中心点的若干个曲线，所述曲线用于指示第二颌骨关键点映射到所述目标平面上的所有可能的位置；所述曲线上的每一个点的坐标位置对应所述第二颌骨关键点在三维空间中的一个或多个角度信息；

目标曲线确定模块，用于根据面部第二颌骨关键点在所述目标平面上的坐标位置，确定所述第二颌骨关键点所属的目标曲线，所述目标曲线为所述若干个曲线中的一个；

空间位置确定模块，用于根据所述第二颌骨关键点的坐标位置和所述目标曲线，确定所述第二颌骨关键点的空间位置；

机器人口型动作确定模块，用于根据二维平面投影上的一系列动作获取面部动作参数，反推出机器人口型动作。

6.如权利要求5所述的系统，其特征在于，所述机器人口型动作确定模块，具体用于：

针对某一帧视频图像中的面部骨骼关键点，选择关联运动的骨骼关键点；

在所述某一帧图像中，设立二维坐标系，以上颌骨为坐标原点，预设第二颌骨关键点的多个可能出现的位置，反推出机器人口型动作。

7.如权利要求5所述的系统，其特征在于，所述系统还包括：

相对距离模块，用于通过相对距离表示所述第一颌骨点和第二颌骨点的距离关系；所述相对距离为所述第一颌骨关键点和所述第二颌骨关键点之间在所述图像信息上的实际距离，与所述第一颌骨关键点和所述第二颌骨关键点之间在所述图像信息上能够呈现的最大距离之比。