[发明专利]基于视觉显著度的视频广告关联方法与系统

说明书

技术领域

本发明涉及一种图像和视频处理方法和系统，特别是关于一种基于视觉显著度的视频广告关联方法与系统。

背景技术

近年来，随着视频广播技术的迅速发展，视频广播以及视频文件的数量出现了爆炸式的增长。而在播放视频的同时，在视频内或视频周边插播广告进行宣传的方法也已经被很多视频提供商及播放软件所采用。目前的视频广告插播方法主要包括以下几种：

1.时域广告片段。如附图1(a)所示，指在播放视频的开始的缓冲时间或暂停时间，插播特定的广告片段。广告片段可以为广告图片、广告视频等形式。

2.网页周边广告。如附图1(b)所示，指在播放视频的同时，还在播放器周边的网络区域显示预定义的广告信息，如广告图片等。

3.带状广告。如附图1(c)所示，指在视频播放的同时，不定时的在视频上方或下方的一个长条形矩形区域内显示广告，一般为了不影响视频播放，所采用的广告为图片广告或简单的Flash广告。

4.角落广告。如附图1(d)所示，指在视频播放的同时，在用户较少注意到的角落里播放小的广告标志图片或动画。

目前，这四种广告宣传方法的方法都已经得到了广泛的应用。如“优酷网”和“YouTube”以及其他的视频提供商常常采用第1和第3种广告方法。而“土豆网”主要采用第2种广告方法。第4种方法也已经被一些播放软件所采用，如“暴风影音”等。然而，这些插入方法并不能达到较好的广告效果。例如，当按照第3和第4种方法直接将广告插入视频内容时，显示的广告常常会影响用户的观看。按照第1种方法，在片头或暂停时插入广告时，用户常常在广告播出时浏览其他网页，从而降低了广告效果。而按照第2种方法对用户的干扰最少，但在网页周边直接显示的预定义广告通常与视频内容无关，容易被用户作为网页背景忽略。

在现有研究和专利中，中国专利“一种插入广告的方法及装置”(申请号200710000231.2)提出了一种基于插入时间点的视频内容来模糊查询广告片段，并暂停当前视频流并插播检索到的广告片段的方法。中国专利“选择性媒体流广告技术”(申请号00817788.0)识别出当前视频的大致领域或明显广告标识，并选择相关领域或相关广告标识的广告片段。最后，在特定时间点停止流媒体的播放，并插播广告片段。中国专利“在网络直播缓冲过程中播放广告的方法、系统及客户端”(申请号200610090101.8)主要是在网络视频播放前的缓冲时间播放预定义的广告片段。论文“Video Sense：towards effectiveonline video advertising”(Video Sense：面向有效的在线视频广告方法，Tao Mei等，ACM Multimedia 2007)中，对一段视频计算用户关注程度变化曲线，并选择用户关注程度较低的时间点插入广告片段。广告片段是基于该插入时间点的前、后视频内容来选择的。总的来说，现有方法均能通过某种方式来对视频插入广告信息。然而，现有方法存在两个主要问题：

1)对用户观看造成干扰。无论是在视频内部区域插入广告还是暂停视频内容插播广告，均会影响用户的观看体验，进而使得广告起到消极效果。

2)缺少对显著内容的关联。在观看视频时，一般用户均会关注较为显著的视频内容。因此，插入与显著内容无关的广告一方面会影响用户观看，另一方面也起不到广告应用的效果。

发明内容

为了解决上述问题，本发明提供了一种根据视频显著内容自动关联相应的广告信息的方法，并在不影响视频正常观看的情况下，将关联的广告信息显示在视频周边区域。在本发明中，广告内容及增值信息是显示在视频周边的位置，从而避免了对用户观看造成干扰。此外，广告内容作为对视频中显著内容的信息补充，方便了用户对其注意到的视频显著区域的进一步探索。本发明的效果示例图如附图1(e)，图1(f)和图1(g)所示。通过将插入广告与视频内容关联起来，可以在不影响用户观看的情况下提供额外增值信息，而在用户对视频内容感兴趣时，又可以直接浏览广告图片及相关信息(如价格等增值信息)，以方便的获得与其感兴趣内容相关的信息，进而为用户提供了一种新的视频浏览和体验方式。

本发明的目的在于给出一种基于视觉显著度的视频广告关联方法与系统。该方法主要包括以下几个步骤：

11)获取视频流中若干采样帧的显著度分布图，并提取视频关联区域。

12)使用提取的视频关联区域检索相关的广告标志及相关信息。

13)将检索到的广告标志及相关信息随上述视频流同步播放给用户。