[发明专利]手部关键点检测方法、装置及终端设备

权利要求书

1.一种手部关键点检测方法，其特征在于，包括：

获取待检测的目标图像；

使用以手部分割掩码为监督信息的手部关键点检测模型对所述目标图像进行处理，得到所述目标图像的输出热图集合；

根据所述输出热图集合确定各个手部关键点的位置。

2.根据权利要求1所述的手部关键点检测方法，其特征在于，所述手部关键点检测模型的训练过程包括：

获取样本图像以及所述样本图像的第一标注信息和第二标注信息；所述样本图像为对所述手部关键点检测模型进行训练的图像；所述第一标注信息为手部分割掩码的标注信息，所述第二标注信息为手部关键点位置的标注信息；

使用所述手部关键点检测模型对所述样本图像进行处理，得到所述样本图像的手部分割掩码和输出热图集合；

根据所述样本图像的手部分割掩码和所述第一标注信息计算所述手部关键点检测模型的第一训练损失；

根据所述样本图像的输出热图集合和所述第二标注信息计算所述手部关键点检测模型的第二训练损失；

根据所述第一训练损失和所述第二训练损失对所述手部关键点检测模型的模型参数进行调整。

3.根据权利要求1所述的手部关键点检测方法，其特征在于，所述手部关键点检测模型的训练过程包括：

获取样本图像以及所述样本图像的第一标注信息和第二标注信息；所述样本图像为对所述手部关键点检测模型进行训练的图像；所述第一标注信息为手部分割掩码的标注信息，所述第二标注信息为手部关键点位置的标注信息；

使用所述手部关键点检测模型对所述样本图像进行处理，得到所述样本图像的手部分割掩码；

根据所述样本图像的手部分割掩码和所述第一标注信息计算所述手部关键点检测模型的第一训练损失；

使用所述手部关键点检测模型对所述样本图像的手部分割掩码进行处理，得到所述样本图像的输出热图集合；

根据所述样本图像的输出热图集合和所述第二标注信息计算所述手部关键点检测模型的第二训练损失；

根据所述第一训练损失和所述第二训练损失对所述手部关键点检测模型的模型参数进行调整。

4.根据权利要求2所述的手部关键点检测方法，其特征在于，所述根据所述样本图像的输出热图集合和所述第二标注信息计算所述手部关键点检测模型的第二训练损失，包括：

根据所述第二标注信息生成所述样本图像的基准热图集合；

根据所述样本图像的输出热图集合和基准热图集合计算所述手部关键点检测模型的第二训练损失。

5.根据权利要求4所述的手部关键点检测方法，其特征在于，所述根据所述样本图像的输出热图集合和基准热图集合计算所述手部关键点检测模型的第二训练损失，包括：

根据所述样本图像的输出热图集合和基准热图集合分别计算各个手部关键点的训练损失；

根据各个手部关键点的训练损失计算所述第二训练损失。

6.根据权利要求5所述的手部关键点检测方法，其特征在于，所述根据所述样本图像的输出热图集合和基准热图集合分别计算各个手部关键点的训练损失，包括：

从所述基准热图集合中选取目标关键点对应的基准热图，并从所述输出热图集合中选取所述目标关键点对应的输出热图，所述目标关键点为任意一个手部关键点；

根据所述基准热图和所述输出热图计算所述目标关键点的训练损失。

7.根据权利要求6所述的手部关键点检测方法，其特征在于，所述根据所述第二标注信息生成所述样本图像的基准热图集合，包括：

根据所述第二标注信息确定所述目标关键点的位置；

以所述目标关键点的位置为中心进行高斯模糊，得到所述目标关键点对应的基准热图；

将所述目标关键点对应的基准热图添加入所述基准热图集合中。