[发明专利]基于关键动作特征与位置信息的单人运动图像摘要方法

说明书

本发明提供了一种基于关键动作特征与位置信息的单人运动图像摘要方法，包括：基于特征提取和相似性评估获取视频的关键动作帧，并获取其中运动人员的位置信息；对视频进行背景建模和目标轨迹提取；对关键动作帧中运动人员的位置信息与目标轨迹进行碰撞检测，无碰撞的轨迹直接加入重排轨迹，如果有碰撞，则依据碰撞率公式对目标轨迹与关键动作帧中所有的位置进行碰撞率检测，如果碰撞率小于阈值，就将这一目标轨迹加入重排轨迹，如果碰撞率大于或等于阈值，就舍弃这一轨迹；将重排轨迹与背景图片进行泊松融合，生成图像摘要。本发明可以对运动动作进行有效的评估，同时图像摘要可以让用户更直观的看到自己动作的不足，便于改正动作。

技术领域

本发明涉及图像摘要技术领域，具体地，涉及一种基于关键动作特征与位置信息的单人运动图像摘要方法。

背景技术

在传统体育项目教学中，对其动作姿势是否标准的评估依赖于教练的个人经验及眼力，缺乏量化的评估标准，难以准确有效地评估其动作的规范性并给出合理的改进意见，基于视觉的人体姿态评估，为体育项目教学及指导提供了一种全新的交互方式，需要一种结合人体姿态识别地图像摘要方法，能够更专业、更智能、更具有针对性的对运动动作进行有效的评估，同时生成图像摘要可以让用户更直观的看到自己动作的不足，便于改正动作。

发明内容

基于以上所述，针对学校教学智能化、数据化的迫切需求，本申请创新性的将图像摘要技术与人体姿态识别技术结合在一起，设计并实现了一种基于关键动作特征与位置信息的单人运动图像摘要方法。

为解决上述技术问题，本发明采用以下技术方案：

第一方面，提供一种基于关键动作特征与位置信息的单人运动图像摘要方法，包括：

步骤1：对输入的待检测运动人员s的单人运动视频V进行特征提取得到每一帧的特征信息；

步骤2：对所述每一帧的特征信息与预构建的数据库中m个标准动作关键点间的特征信息进行相似性评估，确定m个关键动作帧，并基于所述确定的m个关键动作帧获取关键动作帧中运动人员s的位置信息P；其中所述数据库中m个标准动作关键点间的特征信息包括m个标准动作关键点间的距离特征和角度特征；

步骤3：对视频V进行背景建模和目标轨迹提取，得到背景图片BG和运动人员s轨迹位置信息；

步骤4：根据关键动作帧中的运动人员s的位置信息P与运动人员s轨迹位置信息的空间关系进行轨迹重排，将符合要求的轨迹位置Q_i加入位置信息P中，得到重排轨迹；

步骤5：将重排轨迹与背景图片BG进行泊松融合，生成包含所有关键动作的图像摘要。

在一些实施例中，步骤1包括：对输入的待检测运动人员s的单人运动视频V＝[f₁，f₂，...，f_i，...，f_N]中的第i帧f_i，f_i是视频V中的第i帧w×h图像，w×h是输入视频的分辨率，进行特征提取得到每一帧的特征信息，其中特征信息包括M个关键点间的距离特征[D_i，1，D_i，2，...，D_i，j，...，D_i，M]和角度特征[A_i，1，A_i，2，...，A_i，j，...，A_i，M]；其中D_i，j是f_i中第j个关键点与其他关键点间的距离向量，A_i，j是f_i中第j个关键点与其他关键点间的角度向量。

进一步地，所述步骤1中，基于openpose算法进行特征提取，M为18。