[发明专利]动作行为的识别方法、装置和服务器在审
申请号: | 202211225920.4 | 申请日: | 2022-10-09 |
公开(公告)号: | CN115497168A | 公开(公告)日: | 2022-12-20 |
发明(设计)人: | 杨文涛;黄亚峰;张舒莹 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06V40/20 | 分类号: | G06V40/20;G06V20/40;G06V10/80;G06V10/82;G06V10/762;G06V10/764;G06V10/26;G06N3/04 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 徐焕;童磊 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 行为 识别 方法 装置 服务器 | ||
本说明书提供了动作行为的识别方法、装置和服务器,应用于人工智能技术领域。基于上述方法,具体实施前,可以预先训练得到至少包括通过预设连接并联的第一分支网络和第二分支网络的预设的动作行为识别模型。具体实施时,可以利用预设的动作行为识别模型处理所获取的目标视频,以得到目标识别结果;再根据目标识别结果,确定目标对象动作行为的细粒度识别结果。从而可以通过有效利用粗粒度行为识别时得到的第一类视频特征,与细粒度行为识别时得到的第二类视频特征进行融合;并根据融合后的视频特征进行较为精细的细粒度识别,得到精度较高的细粒度识别结果,进而可以精准地检测判断该目标对象的动作行为是否存在风险,减少检测误差。
技术领域
本说明书属于人工智能技术领域,尤其涉及动作行为的识别方法、装置和服务器。
背景技术
在许多业务场景中,常常需要对视频中的人物对象的动作行为进行检测识别。
但是,基于现有方法对人物对象的动作行为的识别精度往往较低,误差相对较大,无法对视频中的人物对象的动作行为精准地进行细粒度行为识别。
针对上述问题,目前尚未提出有效的解决方案。
发明内容
本说明书提供了一种动作行为的识别方法、装置和服务器,可以通过有效利用粗粒度行为识别时得到的第一类视频特征,与细粒度行为识别时得到的第二类视频特征进行融合;并根据融合后的视频特征进行较为精细的细粒度识别,得到精度较高的细粒度识别结果。
本说明书提供了一种动作行为的识别方法,包括:
获取目标视频;其中,所述目标视频包含有目标对象的动作影像;
利用预设的动作行为识别模型处理目标视频,得到对应的目标识别结果;其中,预设的动作行为识别模型至少包括并联的第一分支网络和第二分支网络;所述第一分支网络与第二分支网络通过预设连接相连;所述第一分支网络用于进行粗粒度行为识别;所述第一分支网络在进行粗粒度行为识别时所生成的第一类视频特征通过预设连接流入第二分支网络,并与第二分支网络生成的第二类视频特征融合,以进行细粒度行为识别;
根据目标识别结果,确定出目标对象动作行为的细粒度识别结果。
在一个实施例中,在根据目标识别结果,确定出目标对象动作行为的细粒度识别结果之后,所述方法还包括:根据目标对象动作行为的细粒度识别结果,检测目标对象的动作行为是否存在风险。
在一个实施例中,所述目标识别结果还包括目标对象动作行为的粗粒度识别结果。
在一个实施例中,在根据目标识别结果,确定出目标对象的粗粒度行为和细粒度行为之后,所述方法还包括:
根据目标对象动作行为的粗粒度识别结果和细粒度识别结果,检测目标对象的动作行为是否存在风险。
在一个实施例中,在根据目标对象动作行为的粗粒度识别结果和细粒度识别结果,检测目标对象的动作行为是否存在风险之后,所述方法还包括:
在确定目标对象的动作行为存在风险的情况下,生成关于目标对象的风险提示。
在一个实施例中,所述预设的动作行为识别模型包括基于双流网络思想的神经网络模型。
在一个实施例中,所述第二分支网络至少包括融合模块,其中,所述融合模块用于融合第一类视频特征和第二类视频特征。
在一个实施例中,利用预设的动作行为识别模型处理目标视频,包括:
利用第一分支网络处理目标视频,以提取出第一类视频特征;
利用第二分支网络处理目标视频,以提取出第二类视屏特征;并利用融合模块融合第一类视频特征和第二类视频特征,得到融合后的视频特征;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211225920.4/2.html,转载请声明来源钻瓜专利网。