[发明专利]一种实时轻量级2D人体姿态估计方法在审
申请号: | 202111477999.5 | 申请日: | 2021-12-06 |
公开(公告)号: | CN114140828A | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 耿国华;李启航;冯龙;王雨;赵燕婷;武浩东;周蓬勃;刘阳洋 | 申请(专利权)人: | 西北大学 |
主分类号: | G06V40/10 | 分类号: | G06V40/10;G06V10/30;G06V10/34;G06V10/32;G06V10/764;G06V10/82;G06K9/62;G06N3/04;G06N3/08 |
代理公司: | 西安众和至成知识产权代理事务所(普通合伙) 61249 | 代理人: | 强宏超 |
地址: | 710069 *** | 国省代码: | 陕西;61 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实时 轻量级 人体 姿态 估计 方法 | ||
1.一种实时轻量级2D人体姿态估计方法,其特征在于,包括以下步骤:
步骤1:对视频流提取出的视频帧图像进行预处理:以中心点为基准,将图像统一缩放裁剪;
步骤2:对步骤1得到的视频帧图像进行平滑处理,并抑制图像中的高斯噪声;
步骤3:将Senet通道注意力机制融入到目标检测算法中,对步骤2得到的图像进行目标检测;
步骤4:在原始的OpenPose模型网络中,用深度可分离卷积为核心的Mobilenet网络替换VGG19;
步骤5:通过改进的OpenPose模型提取人体骨骼关节点坐标;
步骤6:将步骤5获得的人体骨骼关节点坐标通过贝塞尔曲线得到关节运动轨迹,并使用轨迹相似性度量算法得到关节间的距离数组;
步骤7:利用线性变换分类器对步骤6获取的关节点坐标进行分类,判断人物的行为姿态。
2.根据权利要求1所述的实时轻量级2D人体姿态估计方法,其特征在于:所述的步骤1中将图像统一缩放裁剪为512×512mm大小。
3.根据权利要求1所述的实时轻量级2D人体姿态估计方法,其特征在于:所述的步骤2中使用高斯滤波器抑制图像中的高斯噪声。
4.根据权利要求1所述的实时轻量级2D人体姿态估计方法,其特征在于:所述的步骤3中将Senet通道注意力机制融入到Tiny_YOLOv3目标检测算法中,对步骤2得到的图像进行目标检测。
5.根据权利要求1所述的实时轻量级2D人体姿态估计方法,其特征在于:所述的步骤4中用深度可分离卷积为核心的Mobilenet网络替换OpenPose网络结构中的VGG19,同时采用residual结构的3个3×3的卷积替换一个7×7卷积。
6.根据权利要求5所述的实时轻量级2D人体姿态估计方法,其特征在于:采用深度可分离卷积的形式对每一个3×3卷积继续改进。
7.根据权利要求6所述的实时轻量级2D人体姿态估计方法,其特征在于:步骤4所述的深度可分离卷积由深度卷积和点卷积组成;
假设输入图像大小为D1×D1×M,卷积核大小为DK×DK×M,输出图像大小为D0×D0×N,则传统卷积的参数量为:
Wstand=(DK×DK×M)×N (1)
其中,Wstand表示的传统卷积的参数量,DK×DK代表卷积核的长、宽,D1×D1和D0×D0分别代表输入图像和输出图像的长和宽,M和N代表图像的深度;
而深度卷积的卷积核尺寸大小为(DK,DK,1),共有M个,点卷积的卷积核尺寸大小为(1,1,M),共有N个,则深度卷积和点卷积的参数量为:
Wdepthwise=(DK×DK×1)×M (2)
Wpointwise=(1×1×M)×N (3)
其中Wdepthwise表示深度卷积的参数量,Wpointwise表示点卷积的参数量;
因此,深度可分离卷积参数量为:
WD=Wdepthwise+Wpointwise
=(DK×DK×1)×M+(1×1×M)×N (4)
其中,WD表示的是深度可分离卷积参数量;
所以,深度可分离卷积参数量与传统卷积参数量的参数之比为:
其中η表示的是深度可分离卷积参数量与传统卷积参数量的参数之比,WD表示的是深度可分离卷积参数量,Wstand表示的传统卷积的参数量,N代表输出图像的深度,代表卷积核大小的平方。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于西北大学,未经西北大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111477999.5/1.html,转载请声明来源钻瓜专利网。