[发明专利]人体动作识别结果的评价方法、装置和电子设备

权利要求书

1.一种人体动作识别结果的评价方法，其特征在于，包括：

将人体动作识别结果转换成特征信息，所述特征信息为3D关键点信息、点云数据或人体轮廓信息；

将所述人体动作识别结果对应的待检测人体动作的RGB-D图像进行处理得到与所述特征信息对应的标准特征信息；

确定所述特征信息与所述标准特征信息之间的误差度；其中，所述人体动作识别结果是对所述待检测人体动作的RGB-D图像进行处理得到的。

2.根据权利要求1所述的人体动作识别结果的评价方法，其特征在于，所述人体动作识别结果是对所述待检测人体动作的RGB-D图像进行处理得到的，具体包括：

将待检测人体动作的RGB-D图像进行预处理，得到无背景像素干扰的RGB图像和无背景像素干扰的点云三维坐标图；

将所述无背景像素干扰的RGB图像和无背景像素干扰的点云三维坐标图输入姿态参数识别模型，输出所述待检测人体动作的姿态参数、形态参数和位移参数；

其中，所述姿态参数识别模型是基于样本无背景像素干扰的RGB图像和无背景像素干扰的点云三维坐标图以及预先确定的对应于各样本无背景像素干扰的RGB图像的3D关键点坐标标签和三维点云标签进行训练后得到的，所述姿态参数识别模型训练时的损失函数基于关键点损失、平滑损失和点云损失构成；

将所述待检测人体动作的姿态参数、形态参数和位移参数输入参数化模型，输出人体动作识别结果。

3.根据权利要求1或2所述的人体动作识别结果的评价方法，其特征在于，所述特征信息为预测的3D关键点集合，记作

对应地，所述将所述人体动作识别结果对应的待检测人体动作的RGB-D图像进行处理得到与所述特征信息对应的标准特征信息，具体包括：

通过人工手动方式将所述人体动作识别结果对应的待检测人体动作的RGB-D图像进行人体关键点的标注，得到标准的3D关键点集合，记作K，并人工判断所述人体关键点是否有自身遮挡，根据遮挡结果形成由0和1构成的one-hot向量V；

所述确定所述特征信息与所述标准特征信息之间的误差度，具体包括：

通过如下公式计算所述预测的3D关键点集合与所述标准的3D关键点集合K之间的误差度err:

其中，norm为归一化因子，V为所述one-hot向量，当所述one-hot向量中第i个元素对应的人体关键点有自身遮挡，则所述第i个元素取值为0，否则，所述第i个元素取值为1，i＝1,2,3,…,N_V，N_V为向量V中元素的个数。

4.根据权利要求1或2所述的人体动作识别结果的评价方法，其特征在于，所述特征信息为预测的点云数据集合，记作

对应地，所述将所述人体动作识别结果对应的待检测人体动作的RGB-D图像进行处理得到与所述特征信息对应的标准特征信息，具体包括：

将所述人体动作识别结果对应的待检测人体动作的RGB-D图像中的RGB图像输入标注算法得到标准的2D关键点坐标，再将所述标准的2D关键点坐标转换为标准的3D关键点坐标；

基于所述标准的3D关键点坐标和所述RGB-D图像中的深度图，通过Ceres优化，得到姿态参数，将所述姿态参数输入预设参数化模型，输出标准的点云数据集合P；

所述确定所述特征信息与所述标准特征信息之间的误差度，具体包括：

通过如下公式计算所述预测的点云数据集合与所述标准的点云数据集合P之间的误差度err:

其中，norm为归一化因子。

5.根据权利要求4所述的人体动作识别结果的评价方法，其特征在于，所述标准算法为alphapose的2D关键点检测算法。