[发明专利]一种基于视频相关性的视频预处理方法、装置以及存储介质

说明书

本发明提供一种基于视频相关性的视频预处理的方法、装置以及存储介质，通过接收视频序列；识别所述视频序列中的视频对象，并确定所述视频对象的第一区域作为目标区域；初始化所述视频序列的第一视频帧，并获取所述目标区域的第一坐标、第一图像信息；依次获取所述视频序列的第二视频帧，并获取所述目标区域的第二坐标，以及所述第二坐标对应的第二图像信息；基于第一视频帧与第二视频帧的相关性，判断是否将所述第二视频帧作为目标视频帧序列。本发明，通过镜头分割以及对于镜头分割后的视频序列进行基于视频对象基准关键点的识别与匹配从而确定视频帧是否应该剔除，从而解决视频序列存在干扰的技术问题。

技术领域

本发明涉及视频图像处理技术领域，尤其涉及一种基于视频相关性的视频预处理方法、装置以及存储介质

背景技术

视频预处理的第一个作用是提高编码视频的质量。在实际的视频监控的应用中，不像娱乐视频，往往有高质量的摄像机、良好的演播室拍摄环境和专业技术人员的时时人为干预，因此可以保证得到的高质量的采集视频。而视频监控系统由于成本、环境等因素影响，所获取的原始视频质量并不高，甚至很低。例如，由于环境、噪声、光照、运动等影响，往往所采集的图像常常出现模糊、扭曲、噪点、太亮或太暗、彩色不鲜明、……。对于这样比较差的视频，再进行压缩、传输、解码显示，用户所看到的监控视频常常不能令人满意的。如何在现有的条件下提高采集视频质量的问题就实在地放在我们面前。对此，一个重要的应对措施就是在视频采集环节进行预处理(preprocessing)，以利于提高采集视频质量，有利于后续的视频处理，以利于用户提取视频中感兴趣的信息。

现如今，视频数据的分割以及预处理，主要集中于基于颜色直方图以及镜头分割的算法，执行的视频序列中的镜头分割。而对于传统的对于一个镜头中的视频数据，也可能存在一些与视频主对象不相关的视频帧。比如：我们在对于人脸的视频拍摄过程中，对于人脸扭头去做别的动作；以及当前视频的对象进行了片刻的遮挡等等。这些产生的干扰因素几帧图像在进行整个图像识别时根本没有识别以及跟踪的必要，而且会对整个视频的识别产生干扰。对于基于视频对象的视频而言，其必须要经过图像预处理来将干扰的视频帧剔除，且尽可能保证进入后续视频识别以及视频分析的视频帧对象的纯粹性，低干扰性，从而便于后续的视频处理与视频分析。

发明内容

有鉴于此，本发明提供了基于视频相关性的视频预处理方法、装置以及存储介质，通过镜头分割以及对于镜头分割后的视频序列进行基于视频对象基准关键点的识别与匹配从而确定视频帧是否应该剔除，从而解决视频序列存在干扰的技术问题。

本发明的技术方案如下：

一种基于视频相关性的视频预处理的方法，所述方法包括：

接收视频序列；所述视频序列为经过镜头分割的视频帧序列；识别所述视频序列中的视频对象，并确定所述视频对象的第一区域作为目标区域；

初始化所述视频序列的第一视频帧，并获取所述目标区域的第一坐标，以及所述第一坐标对应的第一图像信息；所述第一视频帧为视频序列的首帧图像；

依次获取所述视频序列的第二视频帧，并获取所述目标区域的第二坐标，以及所述第二坐标对应的第二图像信息；；

基于第一图像信息以及第二图像信息，确定第一视频帧与第二视频帧的相关性；

基于所述相关性，判断是否将所述第二视频帧作为目标视频帧序列。

优选的，所述获取所述目标区域的第一坐标，包括：获取所述目标区域的区域中心点坐标。

优选的，所述第一图像信息、第二图像信息包括：图像像素信息以及时间戳信息。

优选的，所述基于第一图像信息以及第二图像信息，确定第一视频帧与第二视频帧的相关性，包括：