[发明专利]一种实时轻量级2D人体姿态估计方法在审
申请号: | 202111477999.5 | 申请日: | 2021-12-06 |
公开(公告)号: | CN114140828A | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 耿国华;李启航;冯龙;王雨;赵燕婷;武浩东;周蓬勃;刘阳洋 | 申请(专利权)人: | 西北大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/30;G06V10/34;G06V10/32;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 西安众和至成知识产权代理事务所(普通合伙) 61249 | 代理人: | 强宏超 |
地址: | 710069 *** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实时 轻量级 人体 姿态 估计 方法 | ||
本发明公开了一种实时轻量级2D人体姿态估计方法:首先提取视频帧图像,消除图像中的高斯噪声,然后通过融入注意力机制的目标检测算法检测图像中的目标人物位置,再通过改进的轻量级OpenPose模型提取人体骨骼关节点坐标,后利用贝塞尔曲线得到关节运动轨迹,同时使用轨迹相似性度量算法计算得到关节间的距离数组,最后利用线性变换分类器对获取的关节点坐标进行分类,从而快速准确地识别出人物的姿态;本发明工作高效,更具实时性,以较低的设备成本运行,并以较低的计算量处理骨架数据,对噪声的干扰具有很强的鲁棒性,使人体姿态估计方法更具准确性、及时性以及在复杂的环境背景下表现更佳,消除了光线和阴影对人体姿态估计的影响。
技术领域
本发明属于计算机图形处理技术领域,具体涉及一种实时轻量级2D人体姿态估计方法。
背景技术
秦腔“形成于秦,精进于汉,昌明于唐,完整于元,成熟于明,广播于清,几经演变,蔚为大观答”,是相当古老的剧种,堪称中国戏曲的鼻祖。旧时,在中国西北辽阔的大地乃至西域国家,秦腔曾是老百姓最为喜爱和掌握的艺术形式。它简单灵活、轻松幽默、亲切随和,富有浓郁的地域特色和乡土气息。然而随着现代经济高速发展,互联网快速普及,国民大众的娱乐方式发生了变化。秦腔原始的娱乐性功能被削弱,受众群体老龄化,面临着生存和发展的危机。
通过对摄像头生成的视频流逐帧提取图像,采用基于OpenPose改进的方法对视频流中的人物进行实时人体姿态估计,以此用来进行实时人机交互,让人们可以边看秦腔戏曲视频边跟着学,极大地推动了秦腔文化的发展,以更加现代化的方式让人们重拾对传统戏剧的兴趣,体会秦腔这一传统中华文化的深厚艺术积累和丰富的人文内涵。
目前,2D人体姿态估计是一个热门的研究课题,涵盖了广泛的应用范围。人们已经尝试了许多方法来定位身体部位的解剖关键点。Myers等人使用带有八个摄像头的运动捕捉系统研究了100名高尔夫球手挥杆时的臀部和躯干运动。Fujimori等人开发了一套可穿戴套装可以用全身的触觉传感器和一个运动传感器来捕捉运动,以此来估计其方向。Evans等人使用电磁运动捕捉系统来估计三维高尔夫挥杆运动。Liu等人提出了一个康复系统,并使用Kinect相机的骨骼定位模块从深度图像中捕获3D数据摄像机从深度图像中捕获3D数据,从单个图片中获得静态手势。这些传统的人体姿态识别方法缺乏准确性和即时性,并且在复杂的环境背景下表现不佳。
发明内容
针对现有技术存在的不足,本发明的目的在于提供一种实时轻量级2D人体姿态估计方法,具有较高的实时性,以较低的设备成本运行,并以较低的计算量处理骨架数据,工作高效,同时对噪声的干扰具有很强的鲁棒性。
为了实现上述目的,本发明采用以下技术方案予以实现:
一种实时轻量级2D人体姿态估计方法,包括以下步骤:
步骤1:对视频流提取出的视频帧图像进行预处理:以中心点为基准,将图像统一缩放裁剪;
步骤2:对步骤1得到的视频帧图像进行平滑处理,并抑制图像中的高斯噪声;
步骤3:将Senet通道注意力机制融入到目标检测算法中,对步骤2得到的图像进行目标检测;
步骤4:在原始的OpenPose模型网络中,用深度可分离卷积为核心的Mobilenet网络替换VGG19;
步骤5:通过改进的OpenPose模型提取人体骨骼关节点坐标;
步骤6:将步骤5获得的人体骨骼关节点坐标通过贝塞尔曲线得到关节运动轨迹,并使用轨迹相似性度量算法得到关节间的距离数组;
步骤7:利用线性变换分类器对步骤6获取的关节点坐标进行分类,判断人物的行为姿态。
本发明还具有以下技术特征:
优选的,所述的步骤1中将图像统一缩放裁剪为512×512mm大小。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西北大学,未经西北大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111477999.5/2.html,转载请声明来源钻瓜专利网。