[发明专利]视频检测方法、装置、设备及介质在审
申请号: | 202210369060.5 | 申请日: | 2022-04-08 |
公开(公告)号: | CN114724218A | 公开(公告)日: | 2022-07-08 |
发明(设计)人: | 郝艳妮;马先钦;王璋盛;王一刚;曹家;罗引;王磊 | 申请(专利权)人: | 北京中科闻歌科技股份有限公司 |
主分类号: | G06V40/16 | 分类号: | G06V40/16;G06V40/40;G06V20/40;G06V10/82;G06N3/04;G06N3/08 |
代理公司: | 北京开阳星知识产权代理有限公司 11710 | 代理人: | 吴崇 |
地址: | 100080 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 检测 方法 装置 设备 介质 | ||
本公开涉及一种视频检测方法、装置、设备及介质。其中,视频检测方法包括:获取待检测的图像序列,图像序列包含同一视频中的至少两个视频帧;针对图像序列中的每个图像,对图像的脸部特征进行非线性变换处理,得到图像对应的脸部多个区域的注意力特征;基于各个图像对应的脸部多个区域的注意力特征,构建图像序列对应的脸部多个区域之间的时序关系特征;基于时序关系特征,计算视频为伪造脸部的视频的概率。根据本公开实施例,能够使得概率的计算结果的准确率更高、泛化能力更强,进而提高伪造脸部视频检测的精确度。
技术领域
本公开涉及视频处理技术领域,尤其涉及一种视频检测方法、装置、设备及介质。
背景技术
伪造脸部视频是指视频内容中的人脸、动物脸等脸部经过深度伪造算法(Deepfake)篡改的视频。
因此,如何准确地检测出伪造脸部视频是亟需解决的技术问题。
发明内容
为了解决上述技术问题,本公开提供了一种视频检测方法、装置、设备及介质。
第一方面,本公开提供了一种视频检测方法,包括:
获取待检测的图像序列,图像序列包含同一视频中的至少两个视频帧;
针对图像序列中的每个图像,对所述图像的脸部特征进行非线性变换处理,得到图像对应的脸部多个区域的注意力特征;
基于各个图像对应的脸部多个区域的注意力特征,构建图像序列对应的脸部多个区域之间的时序关系特征;
基于时序关系特征,计算视频为伪造脸部的视频的概率。
第二方面,本公开提供了一种视频检测装置,包括:
图像获取模块,用于获取待检测的图像序列,图像序列包含同一视频中的至少两个视频帧;
非线性变化模块,用于针对图像序列中的每个图像,对图像的脸部特征进行非线性变换处理,得到图像对应的脸部多个区域的注意力特征;
特征构建模块,用于基于各个图像对应的脸部多个区域的注意力特征,构建图像序列对应的脸部多个区域之间的时序关系特征;
概率计算模块,用于基于时序关系特征,计算视频为伪造脸部的视频的概率。
第三方面,本公开提供了一种视频检测设备,包括:
处理器;
存储器,用于存储可执行指令;
其中,处理器用于从存储器中读取可执行指令,并执行可执行指令以实现第一方面的视频检测方法。
第四方面,本公开提供了一种计算机可读存储介质,该存储介质存储有计算机程序,当计算机程序被处理器执行时,使得处理器实现第一方面的视频检测方法。
本公开实施例提供的技术方案与现有技术相比具有如下优点:
本公开实施例的视频检测方法、装置、设备及介质,能够在获取到待检测的包含同一视频中的至少两个视频帧的图像序列之后,对图像序列中的每个图像的脸部特征进行非线性变换处理,得到每个图像对应的脸部多个区域的注意力特征,并基于各个图像对应的脸部多个区域的注意力特征,构建图像序列对应的脸部多个区域之间的时序关系特征,进而基于时序关系特征,计算视频为伪造脸部的视频的概率,该概率可以用于判断视频是否为伪造脸部的视频,由于在本公开实施例中可以基于图像序列中的对应的脸部多个区域之间的时序关系特征计算该概率,可以在计算该概率时引入脸部多个区域之间的时序关系,进而检测出视频中脸部的时序不一致性,使得概率的计算结果的准确率更高、泛化能力更强,进而提高伪造脸部视频检测的精确度。
附图说明
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京中科闻歌科技股份有限公司,未经北京中科闻歌科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210369060.5/2.html,转载请声明来源钻瓜专利网。