[发明专利]视频事件识别方法、装置、设备及存储介质有效
申请号: | 202110559992.1 | 申请日: | 2021-05-21 |
公开(公告)号: | CN113361344B | 公开(公告)日: | 2023-10-03 |
发明(设计)人: | 汪琦;冯知凡;柴春光;朱勇 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06V20/40 | 分类号: | G06V20/40;G06F16/75;G06F16/783 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 王萌 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 事件 识别 方法 装置 设备 存储 介质 | ||
本申请公开了一种视频事件识别方法、装置、设备及存储介质,涉及计算机技术领域,具体涉及知识图谱、深度学习以及计算机视觉等技术领域。具体实现方案为:通过获取待识别事件的视频,从视频中抽取得到关键帧图像,根据关键帧图像确定视频的预测动作,根据预测动作查询对应的动作图谱,确定预测动作的多个属性,确定多个属性对应的属性值,根据预测动作、多个属性和多个属性对应的属性值,构建事件图,将事件图与预先构建的视频事件图谱中各事件进行匹配,将匹配得到的事件作为视频关联的事件。由此,通过构建的事件图与预先构建的视频事件图谱,确定视频关联的事件,提高了视频事件识别的准确率。
技术领域
本申请公开了一种视频事件识别方法、装置、设备及存储介质,涉及计算机技术领域,具体涉及知识图谱、图像处理、深度学习以及计算机视觉等技术领域。
背景技术
随着视频在信息时代的爆发,视频理解成为一项重要的技术需求,如视频事件识别(也可称为视频事件理解),视频事件识别的主旨是从内容理解的角度深层次的理解视频内容并从多个维度刻画视频中的核心要素,其可识别视频发生的场景、出现的主要动作、参与的实体以及具体发生的事件,并通过结构化的方式实现对视频内容深层次描述,逐渐成为视频理解领域的重要技术。
目前,针对视频事件的识别,还处于基于视频图像的内容识别,无法准确识别得到视频关联的事件。
发明内容
本申请提供了一种视频事件识别方法、装置、设备以及存储介质。
根据本申请的一方面,提供了一种视频事件识别方法,包括:
获取待识别事件的视频;
从所述视频中抽取得到关键帧图像,以根据所述关键帧图像确定所述视频的预测动作;
根据所述预测动作查询对应的动作图谱,确定所述预测动作的多个属性;
根据所述预测动作、所述多个属性和所述关键帧图像,确定所述多个属性对应的属性值;
根据所述预测动作、所述多个属性和所述多个属性对应的属性值,构建事件图;
将所述事件图与预先构建的视频事件图谱中各事件进行匹配,将匹配得到的事件作为所述视频关联的事件。
根据本申请的另一方面,提供了一种视频事件识别装置,包括:
获取模块,用于获取待识别事件的视频;
第一确定模块,用于从所述视频中抽取得到关键帧图像,以根据所述关键帧图像确定所述视频的预测动作;
第二确定模块,用于根据所述预测动作查询对应的动作图谱,确定所述预测动作的多个属性;
第三确定模块,用于根据所述预测动作、所述多个属性和所述关键帧图像,确定所述多个属性对应的属性值;
构建模块,用于根据所述预测动作、所述多个属性和所述多个属性对应的属性值,构建事件图;
处理模块,用于将所述事件图与预先构建的视频事件图谱中各事件进行匹配,将匹配得到的事件作为所述视频关联的事件。
根据本申请的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述实施例所述的视频事件识别方法。
根据本申请的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,所述计算机指令用于使所述计算机执行上述实施例所述的视频事件识别方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110559992.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种清洗机的清洗方法及清洗机
- 下一篇:任务实现方法、装置和电子设备