[发明专利]一种视频摘要的生成方法及装置在审
申请号: | 201710087044.6 | 申请日: | 2017-02-17 |
公开(公告)号: | CN108460032A | 公开(公告)日: | 2018-08-28 |
发明(设计)人: | 潘志敏;车军;向杰 | 申请(专利权)人: | 杭州海康威视数字技术股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;马敬 |
地址: | 310051 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 轨迹集合 获取目标 背景图 时间段 数据库 轨迹平移 检索条件 交叠状态 目标轨迹 目标检索 平移轨迹 平移条件 视觉效果 时间轴 组确定 交叠 预设 拼接 检索 | ||
1.一种视频摘要的生成方法,其特征在于,所述方法包括:
获取目标检索条件,对已建立的数据库进行检索,得到包含符合所述目标检索条件的所有轨迹的第一轨迹集合,其中,所述数据库中存储有从包含目标对象的视频帧中提取的每条轨迹的轨迹信息和目标原图,所述每条轨迹的轨迹信息中包括:与其他轨迹间的交叠状态信息;
根据所述交叠状态信息,将所述第一轨迹集合中发生交叠的至少两条轨迹划分为一组,每组确定为一条组合轨迹;
沿时间轴将待平移轨迹中满足预设平移条件的轨迹平移至同一目标时间段,其中,所述待平移轨迹包括:所述组合轨迹和/或所述第一轨迹集合中未发生交叠的轨迹;
从所述数据库中获取所述目标时间段中的所有轨迹对应的所有第一目标原图;
获得用于生成视频摘要的第一摘要背景图;
将所述所有第一目标原图与所述第一摘要背景图进行拼接,生成视频摘要。
2.根据权利要求1所述的视频摘要的生成方法,其特征在于,所述目标检索条件包括:检索时间段和/或目标对象的检索属性信息;
当检索条件仅包括检索时间段时,所述对已建立的数据库进行检索,包括:
根据所述检索时间段,对所述数据库进行检索,获得所述检索时间段中所有目标对象的轨迹;
当检索条件仅包括目标对象的检索属性信息时,所述对已建立的数据库进行检索,包括:
根据所述目标对象的检索属性信息,对所述数据库进行检索,获得与所述检索属性信息匹配的所有目标对象的所有轨迹;
当检索条件包括检索时间段和目标对象的检索属性信息时,所述对已建立的数据库进行检索,包括:
根据所述检索时间段和所述检索目标对象的检索属性信息,对所述数据库进行检索,获得所述检索时间段中,与所述检索属性匹配的所有目标对象的所有轨迹。
3.根据权利要求1所述的视频摘要的生成方法,其特征在于,在所述获取目标检索条件之前,所述方法还包括:
从输入的视频中提取所有的目标对象;
提取每个目标对象的轨迹信息和属性信息,其中,轨迹信息中包括:轨迹的移动信息、及与其他轨迹间的交叠状态信息;
将所述每个目标对象的轨迹信息和属性信息存储至视频结构化目标描述文件中;
根据所述视频结构化目标描述文件,生成所述数据库;
从包含目标对象的视频帧中,提取轨迹信息对应的每一帧的原图和掩码图,根据所述原图及所述掩码图确定与所述轨迹信息对应的每一帧的目标原图;
将所述原图、所述掩码图及所述目标原图存储至所述数据库中。
4.根据权利要求3所述的视频摘要的生成方法,其特征在于,所述从包含目标对象的视频帧中,提取轨迹信息对应的每一帧的掩码图,包括:
从包含目标对象的视频帧中,提取所述目标对象的运动掩码;
根据所述运动掩码,确定初始的掩码图;
确定所述初始的掩码图的边缘点集;
提取所述边缘点集中的凸集,构成所述掩码图的凸包点集;
填充所述凸包点集对应的凸包,得到最终的掩码图。
5.根据权利要求3所述的视频摘要的生成方法,其特征在于,所述沿时间轴将待平移轨迹中满足预设平移条件的轨迹平移至同一目标时间段,包括:
建立待平移队列及摘要队列;
将所述第一轨迹集合中未在所述目标时间段中的轨迹作为待平移轨迹,并存储至待平移队列中,其中,所述待平移轨迹为所述第一轨迹集合中的未在所述目标时间段中的组合轨迹和未发生交叠的轨迹;
将所述第一轨迹集合中的在所述目标时间段中的轨迹存储至所述摘要队列中;
依次从所述待平移队列中提取当前待平移轨迹,并根据所述数据库中的原图,得到所述当前待平移轨迹对应的视频帧中所有目标对象的矩形框;
计算所述所有目标对象的矩形框分别与已存储至所述摘要队列的每条轨迹对应的视频帧中目标对象的矩形框之间的重叠面积;
在所述重叠面积小于或等于预设重叠参数阈值时,将所述当前待平移轨迹平移至所述目标时间段,并存储至所述摘要队列;
所述从所述数据库中获取所述目标时间段的所有轨迹对应的所有第一目标原图的步骤,包括:
获取所述摘要队列中的所有轨迹对应的所有第一目标原图。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710087044.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:数据信息的展示方法及装置
- 下一篇:在自动聊天中提供响应