[发明专利]动作区域提取方法、装置、设备及计算机可读存储介质在审
申请号: | 202010185060.0 | 申请日: | 2020-03-16 |
公开(公告)号: | CN111368786A | 公开(公告)日: | 2020-07-03 |
发明(设计)人: | 张国辉;朱文和 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06K9/00 | 分类号: | G06K9/00;H04N21/234;H04N21/44 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 魏润洁 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 动作 区域 提取 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种动作区域提取方法,其特征在于,所述动作区域提取方法包括以下步骤:
获取待修剪视频,对所述待修剪视频进行特征提取,得到第一特征序列;
将所述第一特征序列输入至预设时序评估模型,得到时序信息;
检测所述时序信息是否符合预设条件,并根据检测结果得到动作区域的时间段信息;
根据所述时间段信息从所述待修改视频中提取出对应的动作区域。
2.如权利要求1所述的动作区域提取方法,其特征在于,所述获取待修剪视频,对所述待修剪视频进行特征提取,得到第一特征序列的步骤包括:
获取待修剪视频,对所述待修剪视频进行分帧处理,得到视频图像序列;
在所述视频图像序列中每隔预设帧数获取目标视频图像,提取所述目标视频图像的红绿蓝RGB特征和光流特征,得到RGB特征序列和光流特征序列;
对所述RGB特征序列和所述光流特征序列进行拼接,得到第一特征序列。
3.如权利要求2所述的动作区域提取方法,其特征在于,所述时序信息包括各目标视频图像对应的动作片段开始概率和动作片段结束概率,所述检测所述时序信息是否符合预设条件,并根据检测结果得到动作区域的时间段信息的步骤包括:
检测所述动作片段开始概率中是否存在大于第一预设阈值的概率值,得到第一检测结果,并根据所述第一检测结果得到动作片段开始时间数组;
检测所述动作片段结束概率中是否存在大于第二预设阈值的概率值,得到第二检测结果,并根据所述第二检测结果得到动作片段结束时间数组;
根据所述动作片段开始时间数组、所述动作片段结束时间数组,组合得到动作区域的时间段信息。
4.如权利要求1至3中任一项所述的动作区域提取方法,其特征在于,所述根据所述时间段信息从所述待修改视频中提取出对应的动作区域的步骤之前,还包括:
基于所述第一特征序列和所述时间段信息对各动作区域的特征进行采样,得到第二特征序列;
将所述第二特征序列输入至预设动作区域评估模型,得到动作区域评估分数;
所述根据所述时间段信息从所述待修改视频中提取出对应的动作区域的步骤包括:
根据所述动作区域评估分数和所述时间段信息,从所述待修改视频中提取出对应的动作区域。
5.如权利要求4所述的动作区域提取方法,其特征在于,所述基于所述第一特征序列和所述时间段信息对各动作区域的特征进行采样,得到第二特征序列的步骤包括:
基于所述第一特征序列和所述时间段信息、采用线性差值方法对各动作区域的特征进行采样,得到第一预设数量的特征数据;
对所述第一预设数量的特征数据进行拼接,得到第二特征序列。
6.如权利要求4所述的动作区域提取方法,其特征在于,所述根据所述动作区域评估分数和所述时间段信息,从所述待修改视频中提取出对应的动作区域的步骤包括:
按照从大到小的顺序对所述动作区域评估分数进行排序;
根据排序结果获取前第二预设数量的动作区域评估分数,作为目标动作区域评估分数;
从所述时间段信息中获取所述目标动作区域评估分数对应的目标时间段信息;
根据所述目标时间段信息从所述待修改视频中提取出对应的动作区域。
7.一种动作区域提取装置,其特征在于,所述动作区域提取装置包括:
特征提取模块,用于获取待修剪视频,对所述待修剪视频进行特征提取,得到第一特征序列;
信息获取模块,用于将所述第一特征序列输入至预设时序评估模型,得到时序信息;
信息检测模块,用于检测所述时序信息是否符合预设条件,并根据检测结果得到动作区域的时间段信息;
区域提取模块,用于根据所述时间段信息从所述待修改视频中提取出对应的动作区域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010185060.0/1.html,转载请声明来源钻瓜专利网。