[发明专利]使用颜色布局相关性对图像搜索结果进行交互地排列

说明书

技术领域

本主题一般涉及图像搜索，更具体地，涉及通过与图像视觉信息的交互来细化图像搜索结果。

背景技术

商业图像搜索引擎的快速发展允许用户仅通过通常在搜索引擎上键入文本查询就能轻松地检索大量的图像。然而，现有的搜索引擎存在的问题是搜索结果仅使用与文本查询相关联的图像周围的文本信息的相关性。现有的搜索引擎在提供搜索结果方面不使用图像视觉信息。因此，正在进行努力通过利用包括有用的图像视觉信息的图像内容来改进图像搜索结果。

数字图像内容的增长已经使得浏览大量的搜索结果更富挑战性。为了帮助检索图像，已经尝试了用于图像搜索结果细化的技术。通常用来帮助结果细化的两种常规技术是基于内容的重新排列和意图搜索(IntentSearch)。

基于内容的重新排列可依靠图像聚类和分类来提供一组图像的高级描述。虽然基于内容的重新排列使用视觉信息对搜索结果进行重新排序，但其并未考虑用户的意图。另一方面，意图搜索提供界面以允许用户指示感兴趣的一些图像，并自动地试图猜测用户的意图以对图像搜索结果进行重新排序。然而，基于所选图像猜测用户的意图是有些困难。这样，与图像视觉信息一同使用的这些常规的方法不能真正地获得用户对于图像的意图。

因此，期望的是通过用户与图像视觉信息的交互来找到细化图像搜索结果的方法。

发明内容

提供本发明内容以便以简化形式介绍将在以下的具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护主题的关键特征或必要特征，也不旨在用于限定所要求保护主题的范围。

鉴于以上原因，本发明描述了用于通过将颜色布局相关性作为图像检索的一部分来对图像搜索结果进行交互地排列的各种示例性用户界面、方法和计算机程序产品。使用颜色布局相关性方法来对图像搜索结果进行交互地排列包括基于用户提交的文本查询和来自用户的用于兴趣颜色布局的信息，在结构化呈现中呈现图像搜索结果。过程允许从选色板或颜色说明方案中进行选择的交互的设计。接下来，相似度评估对兴趣颜色布局和对应于搜索结果中全部图像的颜色布局之间的相似度进行比较。过程随后根据已计算的相似度分数对图像搜索结果进行排序。

这样，本发明允许用户与图像搜索结果进行交互，从而获得用户的意图。因此，使用颜色布局相关性过程对图像搜索结果进行交互地排列使用颜色布局相关性方法，以使得用户更为方便地指定感兴趣的颜色布局而无需任何特殊的知识或技能。

附图说明

参考附图说明详细描述。参考附图来描述各教学示例。在附图中，附图标记中最左边的数字标识该附图标记首次出现的附图。在不同附图中使用相同的附图标记指示相似或相同的项。

图1是用于使用颜色布局相关性应用程序来对图像搜索结果进行交互地排列的示例性系统的框图。

图2是示出用于使用图1的颜色布局相关性对图像搜索结果进行交互地排列的示例性过程的框图。

图3是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性过程的概览流程图。

图4是示出用于兴趣颜色布局的用户输入的示例性过程的流程图。

图5是用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性用户界面的框图。

图6是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性颜色布局提取的框图。

图7是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性颜色布局相似度评估的框图。

图8是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性自由涂写的框图。

图9是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性颜色布局排列结果的框图。

图10是示出用于使用颜色布局相关性对图像搜索结果进行交互地排列的示例性操作系统的框图。

具体实施方式

概览

本发明致力于用于为图像检索使用颜色布局相关性对图像搜索结果进行交互地排列的各种示例性用户界面、方法和计算机程序产品。存在通过使用文本查询来处理图像搜索的常规的图像检索技术。这些技术通常关注文本查询而不利用图像视觉信息，并且不涉及用户的意图。这样，使用此处描述的颜色布局相关性对图像搜索结果进行交互地排列允许用户通过利用丰富且有用的图像视觉信息以及将对兴趣颜色布局的用户输入纳入对图像搜索结果进行细化的过程中来搜索图像。