[发明专利]基于图像内容的自动标记生成

说明书

背景技术

随着数码相机变得越来越普遍，以及数字存储装置变得越来越便宜，在用户的收集（collection）（或库）中的相片(“照片”)和视频的数目也将呈指数级增加。

对那些照片进行归类是费时的，而且让用户快速找出他们生活中特定时刻的图像是一种挑战。当前，在数码照片的整理、保存和搜索中使用标记作为辅助。加标记涉及到给数字数据指派关键字的过程。然后可以按照关键字或‘标记’来组织数字数据。例如，数码照片的主题可被使用来创建关键字，然后这些关键字可以作为一个或多个标记而与该数码照片相关联。

虽然标记可以人工地加到特定的数码照片上以帮助照片的归类和搜索，但当前只有几种加到照片的自动标记。例如，大多数相机给数码照片指派日期和时间的自动标记。另外，越来越多的相机正包括地理位置来作为照片的自动标记的一部分。最近，已经开发了软件解决方案来提供对于照片中的人的自动识别（并且匹配于特定的身份）。

然而，用户当前只限于通过日期、地理、人标记和人工添加的标记来查询照片。

发明内容

提供了用于给数码照片和视频自动指派标记的方法。不是仅仅具有可由相机自动指派给照片的、来自提供日期、时间和地理位置的元数据的标记，而是可以从照片或视频中自动提取附加信息，并且可以把与该附加信息相关联的关键字或代码作为标记自动指派给该照片或视频。这个附加信息可包括不能直接从图像和与图像相关联的元数据明显地得到的信息。

例如，从图像中可以提取关于某些条件的信息，包括但不限于天气、地理地标、建筑地标和显著的环境特征。在一个实施例中，照片的时间和地理位置元数据被使用来提取对于该特定的位置和时间的天气。所述提取可以通过查询天气数据库以确定对于在拍摄照片时的特定位置和时间的天气而被执行。在另一个实施例中，照片的地理位置元数据和图像识别被使用来提取地理和建筑地标。在再一个实施例中，图像识别被使用来从图像提取显著的环境特征（包括背景、色彩、色调和亮度）和已知的物理对象，且根据所提取的特征和对象把标记自动指派给照片。

按照一个实施例，当在某个照片中识别一个或多个确定的条件时，关键字或对象标识符的数据库可被提供来用作为标记。当一个特定的条件被识别时，与该特定的条件相关联的一个或多个关键字或对象标识符被自动指派为对于该照片的标记。

之前与特定的照片相关联的标记可被使用来生成附加标记。例如，日期信息可被使用来生成与该日期相关联的带有关键字的标记，诸如季节、学校学期、假期和有报道价值的事件。

在另一个实施例中，所识别的对象可以通过知名度进行排名，且该排名被反映为附加标记。另外，在辨认所识别的对象时使用的数据库可包括各种水平的特异性（specificity）/粒度（granularity）。

本概要被提供来以简化的形式介绍概念的选择，这些概念还将在下面的详细说明中进行描述。本概要既不打算确认所要求保护的主题的关键特征或必要特征，也不打算被使用来限制所要求保护的主题的范围。

附图说明

图1图示按照本发明的某些实施例的自动标记生成过程。

图2图示按照本发明的某些实施例的图像识别过程。

图3显示按照本发明的某些实施例的自动标记生成过程的流程。

图4图示按照本发明的实施例的、用于自动标记生成过程的、通过从照片中提取建筑地标而生成标记的过程。

图5图示按照本发明的实施例的、用于自动标记生成过程的、通过从照片中提取地理地标而生成标记的过程。

具体实施方式

描述了用于进行与照片相关联的一个或多个标记的自动生成的技术。自动添加标记可以发生在数码照片（或视频）被装载到或以别的方式传送到可被存储在本地、远端或分布式数据库的照片集时。在其它实施例中，自动添加标记可以在用户发起时发生，以便给现有的照片加标记。

图像可包括但不限于在照片或视频帧中所出现的对象、形状和特征的视觉代表。按照某些实施例，图像可以由数码相机捕获（以照片的形式或作为视频的一部分），并且它可以以由数码相机的图像传感器定义的像素的形式被实现。在一些实施例中，术语“照片图像”在这里被用来指数码照片的图像，与照片所关联的元数据或其它元素相对，并且它可以与术语“图像”互换使用，而不背离本发明的某些实施例的范围。术语“照片”、“图像”和“照片图像”的意义从它们的上下文中将容易理解。