[发明专利]投放行为识别方法、装置、设备及存储介质有效
申请号: | 202110035578.0 | 申请日: | 2021-01-12 |
公开(公告)号: | CN112883782B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 王鑫;朱李娟;李兰 | 申请(专利权)人: | 上海肯汀通讯科技有限公司 |
主分类号: | G06V20/52 | 分类号: | G06V20/52 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 201612 上海市松江区*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 投放 行为 识别 方法 装置 设备 存储 介质 | ||
1.一种投放行为识别方法,其特征在于,包括:
确定待识别视频的时域信息;
对所述待识别视频进行抽帧处理,得到多个候选视频帧;
根据所述多个候选视频帧,确定包含动作事件对应的目标视频帧;
根据各所述动作事件对应的所述目标视频帧和所述时域信息,生成与各所述动作事件对应的目标帧序列,用于进行投放行为识别;
其中,所述根据所述多个候选视频帧,确定包含动作事件对应的目标视频帧,包括:
针对任一当前动作事件,确定所述当前动作事件的初始动作帧;
根据所述初始动作帧之后的至少两个候选视频帧和所述初始动作帧,生成至少一个参考动作帧;
根据各所述参考动作帧和所述多个候选视频帧,确定截止动作帧;
将所述初始动作帧、所述截止动作帧和位于所述初始动作帧与所述截止动作帧之间的候选视频帧,作为所述当前动作事件对应的目标视频帧。
2.根据权利要求1所述的方法,其特征在于,所述确定所述当前动作事件的初始动作帧,包括:
依次确定至少两个候选视频帧的图片相似度,并根据所述图片相似度识别初始动作帧;或者,
将前一动作事件的截止动作帧作为所述当前动作事件的初始动作帧。
3.根据权利要求1所述的方法,其特征在于,所述根据所述初始动作帧之后的至少两个候选视频帧和所述初始动作帧,生成至少一个参考动作帧,包括:
根据所述初始动作中之后的至少两个候选视频帧和所述初始动作帧,确定所述当前动作事件的动作变化信息;所述动作变化信息包括动作变化幅度;
根据所述动作变化幅度,生成至少一个参考动作帧。
4.根据权利要求3所述的方法,其特征在于,所述动作变化信息还包括动作变化率;
相应的,所述根据各所述参考动作帧和所述多个候选视频帧,确定截止动作帧,包括:
根据所述动作变化率,确定与所述参考动作帧对应的候选视频帧的候选区间;
根据所述候选区间中的候选视频帧和所述参考动作帧,确定所述截止动作帧。
5.根据权利要求1所述的方法,其特征在于,所述对所述待识别视频进行抽帧处理,得到多个候选视频帧,包括:
根据所述时域信息,确定所述待识别视频的时间复杂度;
根据所述时间复杂度,确定抽帧频率;
根据所述抽帧频率,对所述待识别视频进行抽帧处理,得到多个候选视频帧。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述方法还包括:
对包含投放行为的目标视频帧进行边缘检测,以识别所述目标视频帧中的投放物的投放物类型;其中,所述投放物类型包括单一投放类型和混合投放类型;
若所述投放物类型为混合投放类型,则存储包括所述目标视频帧的视频片段。
7.一种投放行为识别装置,其特征在于,包括:
时域信息确定模块,用于确定待识别视频的时域信息;
候选视频帧获取模块,用于对所述待识别视频进行抽帧处理,得到多个候选视频帧;
目标视频帧确定模块,用于根据所述多个候选视频帧,确定包含动作事件对应的目标视频帧;
投放行为识别模块,用于根据各所述动作事件对应的所述目标视频帧和所述时域信息,生成与各所述动作事件对应的目标帧序列,用于进行投放行为识别;
所述目标视频帧确定模块,包括:
初始动作帧确定单元,用于针对任一当前动作事件,确定所述当前动作事件的初始动作帧;
参考动作帧确定单元,用于根据所述初始动作帧之后的至少两个候选视频帧和所述初始动作帧,生成至少一个参考动作帧;
截止动作帧确定单元,用于根据各所述参考动作帧和所述多个候选视频帧,确定截止动作帧;
目标视频帧确定单元,用于将所述初始动作帧、所述截止动作帧和位于所述初始动作帧与所述截止动作帧之间的候选视频帧,作为所述当前动作事件对应的目标视频帧。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海肯汀通讯科技有限公司,未经上海肯汀通讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110035578.0/1.html,转载请声明来源钻瓜专利网。