[发明专利]目标对象的方位检测方法、装置、设备及计算机可读介质在审
申请号: | 202210333553.3 | 申请日: | 2022-03-30 |
公开(公告)号: | CN114743026A | 公开(公告)日: | 2022-07-12 |
发明(设计)人: | 屈杨 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | G06V10/46 | 分类号: | G06V10/46;G06V20/40;G06V40/10;G06V10/75;G06T7/73 |
代理公司: | 北京华夏泰和知识产权代理有限公司 11662 | 代理人: | 石鸣宇 |
地址: | 100080 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标 对象 方位 检测 方法 装置 设备 计算机 可读 介质 | ||
本申请涉及一种目标对象的方位检测方法、装置、设备及计算机可读介质。该方法包括:在第一图像中确定目标对象所在的目标区域,其中,第一图像为视频序列中的单帧图像;截取目标区域的第二图像,并基于第二图像确定目标对象的关键点信息;将关键点信息映射为用于识别目标对象方位的识别组合,并将与识别组合匹配的预设人体方位确定为目标对象在第一图像中的方位。本申请基于2D的关键点检测算法进行人体方位检测,通过判断特定关键点是否被检测到,来预测人体方位的信息,解决了相关技术中人体方位检测精度低、成本高的技术问题。
技术领域
本申请涉及目标检测技术领域,尤其涉及一种目标对象的方位检测方法、装置、设备及计算机可读介质。
背景技术
随着计算机技术的发展和计算机视觉原理的广泛应用,利用计算机图像处理技术对目标进行实时跟踪研究越来越热门,对目标进行动态实时跟踪定位在智能化交通系统、智能监控系统、军事目标检测及医学导航手术中手术器械定位等方面具有广泛的应用价值。普通用户经常使用的,如通过用户的运动健身视频,得到用户的人体正对/侧对/背对镜头等人体方位信息,利用人体方位信息分析人体姿态,从而进行体育训练分析。又如在影视剧中,通过检测剧中人物正对/侧对/背对镜头等人体方位信息,利用人体方位信息分析人体姿态,从而进行关键帧筛选。
目前,相关技术中,通常有两种方式可以对视频中的人体方位进行检测,一是利用深度学习算法对人体姿态进行分类,二是利用人体的3D信息进行判断。但是现有的两种方法都由于自身存在的问题而无法满足用户需求,无法广泛推广,如利用深度学习算法对人体姿态进行分类的方案中,存在分类算法存在精度不高,以及标签之间界限模糊的问题,例如,当人体是面对镜头的角度在30度到60度之间时,不好判断应该归类为正对还是侧对镜头的标签。又如在利用人体的3D信息进行判断的方案中,3D模型存在运算量大以及数据难以收集的问题,3D数据需要由专业的设备进行数据采集和标注,获取数据成本巨大。
针对相关技术中人体方位检测精度低、成本高的问题,目前尚未提出有效的解决方案。
发明内容
本申请提供了一种目标对象的方位检测方法、装置、设备及计算机可读介质,以解决人体方位检测精度低、成本高的技术问题。
根据本申请实施例的一个方面,本申请提供了一种目标对象的方位检测方法,包括:
在第一图像中确定目标对象所在的目标区域,其中,第一图像为视频序列中的单帧图像;
截取目标区域的第二图像,并基于第二图像确定目标对象的关键点信息;
将关键点信息映射为用于识别目标对象方位的识别组合,并将与识别组合匹配的预设人体方位确定为目标对象在第一图像中的方位。
可选地,基于第二图像确定目标对象的关键点信息包括:
将第二图像输入第二神经网络模型,以利用第二神经网络模型对第二图像进行人体特征提取,得到第二图像的第二特征图;
将第二特征图转换为多个热力图,其中,一个热力图对应一个预设关键点;
在每个热力图中确定热力图上每个点的热力值,并按照热力值对热力图上的每个点进行排序;
将目标排序位置之前的点的坐标位置进行加权平均,得到每个预设关键点对应的预测关键点的坐标信息,其中,关键点信息包括预测关键点的坐标信息;
按照坐标信息在第一图像中绘制预测关键点。
可选地,将关键点信息映射为用于识别目标对象方位的识别组合,并将与识别组合匹配的预设人体方位确定为目标对象在第一图像中的方位包括:
将目标排序位置之前的点的热力值进行加权平均,得到预测关键点的检测置信度,其中,关键点信息包括预测关键点的检测置信度;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210333553.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于建筑图纸的房间区域识别方法及系统
- 下一篇:一种数字软开关调制器