[发明专利]一种基于最佳裁剪的实时视频缩略方法

说明书

本发明公开了一种基于最佳裁剪的实时视频缩略方法，包括步骤：S1、从视频流中提取当前帧和前一帧；S2、判断是否镜头切换；S3、计算当前帧的显着性图；S4、在显着性图上查找最佳裁剪窗口；S5、缩略当前帧；S6、将处理好的帧在视频流中替换；S7、若存在下一帧，令前一帧等于当前帧，从视频流中提取下一帧作为当前帧，执行S2‑S7。本发明既能够保留视频帧的主要信息，不会使视频内容变形，不会带来画面抖动，保持视频的视觉连贯性，并且具有较高的效率和拓展性，能够做到对内存中或文件中的视频流实时地进行缩放。

技术领域

本发明涉及视频播放、视频图像缩放的技术领域，尤其是指一种基于最佳裁剪的实时视频缩略方法。

背景技术

随着电视、笔记本、PDA和手机等显示设备的普及，显示设备的多样性急剧增加，以及图像和视频媒体源的通用性的增强，使图像适应不同分辨率和纵横比的图像缩略对于提高用户的观看体验变得越来越重要，图像视频缩略已经成为一个重要的问题。直接应用简单的缩放或裁剪，通常会引起视频图像的信息损失和视频图像的内容失真，例如，播放的视频图像中所显示的小物体看不清楚，或者播放的视频图像中所显示的物体长宽比例发生改变。在这种环境下，各种智能多样的视频缩放方法应运而生，它旨在将视频帧重新修正，在新的视频分辨率下保留原始视频帧的主要信息。

专利CN102270093A公开了“一种基于视频图像分辨率的视频自适应方法”，先对输入视频的每一帧计算区域关注度，并根据预先设定的裁剪比例找出每帧保留关注度最大的最佳裁剪窗口，然后再以“整个视频保留能量最大”为基准调整每一帧最佳裁剪窗口的裁剪比例，最后将裁剪后的每一帧在缩放至目标大小。这一方法虽然通过基于内容感知的裁剪方式保留了视频图像中的重要信息，并且不会带来变形，但是针对每一帧单独进行裁剪会带来视频的抖动，并且需要根据计算整个视频的能量来调整裁剪比例，不适用于需要实时缩放的使用场景。

专利CN102541494A公开了“一种面向显示终端的视频尺寸转换系统”，该方法先将视频作镜头分割处理，然后识别远景镜头，对每个远景镜头，通过感知窗口模型计算出感兴趣窗口尺寸将感兴趣区域裁剪出来，最后对感兴趣区域中心点进行时间域平滑处理。这一方法虽然也是只使用裁剪，不会带来内容的变形，并且加入了镜头分割处理和时间域平滑处理保证了视频的连贯性，但是该方法主要是针对远景镜头直接缩放感兴趣区域可能会过小的情况设计的，并不广泛适用于其他场景的视频缩放，并且该方法计算复杂，也不能够达到实时缩放的效果。

专利CN101764968A公开了“一种重要内容无感知畸变的视频图像非等比例缩放方法”，该方法先对关键帧分割打包，然后进行独立包内的视频帧缩放，依次定义视频能量、确定低能量线、选取最优低能量线、复制或删除相同的最优低能量线进行等比例缩放，最后进行相邻独立包间的连贯性处理。这一方法虽然考虑到了实时缩放的使用需求，也具有良好的连贯性，但是该方法侧重点在保持视频图像的重要内容不产生明显的畸变，并不是完全不变形，而且非均匀的删除视频图像内容可能会带来重要内容与不重要内容之间的比例失调，影响观看体验。

因此，有必要提出一种既能够保留视频帧的主要信息，不会使视频内容变形，又不会带来画面抖动，保持视频视觉连贯性的简单快速、可拓展性高、应用范围广的实时视频缩略方法。

发明内容

本发明的目的在于克服现有技术的缺点与不足，提出了一种基于最佳裁剪的实时视频缩略方法，该方法既能够保留视频帧的主要信息，不会使视频内容变形，不会带来画面抖动，保持视频的视觉连贯性，并且具有较高的效率和拓展性，能够做到对内存中或文件中的视频流实时地进行缩放。

为实现上述目的，本发明所提供的技术方案为：一种基于最佳裁剪的实时视频缩略方法，包括以下步骤：

S1、从视频流中提取当前帧和前一帧，若当前帧为视频的第一帧，则生成一幅与视频相同分辨率的全白图片赋值给前一帧；

S2、判断是否镜头切换