[发明专利]图像检索装置和方法、图像处理装置和方法

说明书

技术领域

本发明涉及一种从许多图像中搜索与查询图像相似的图像的图像检索装置和图像检索方法、以及对查询图像实施图像处理的图像处理装置和图像处理方法。

背景技术

通过进行所期望的图像检索，能够向用户提供很多的服务。

例如在对绘画、插图、海报等进行了摄像的情况下，考虑提供与该摄像图像相关联的信息等的服务。

但是，在对绘画、插图等进行摄像时，有时无法从正面进行摄像。

例如如图13那样在照相机与作为摄像对象的海报等不平行的情况下，产生发生变形的现象、海报等的一部分被截断的现象、或者本来未包含的多余的区域被摄像的现象等，成为图像检索失败的主要原因。

因此，在图像检索技术中，针对图像的旋转/放大/缩小/剪辑、照明变动等的鲁棒性的高低很重要，提出了用于提高鲁棒性的各种方法。

例如，在下面的专利文献1中公开了一种图像检索装置，根据具有对应关系的局部特征量的对（pair）来限定图像的区域，由此更鲁棒地进行图像检索。

另外，在下面的专利文献2中公开了一种图像检索装置，针对基于图像的几何学变动的局部图像特征量的变动，鲁棒地（robustly）进行图像检索。

专利文献1：日本特开2010-204908号公报(段落编号[0010]、图1)

专利文献2：日本特开2008-257469号公报(段落编号[0007]、图1)

发明内容

以往的图像检索装置如以上那样构成，因此在专利文献1的情况下存在如下问题：当查询图像发生较大的变形时，有可能无法正确地确定具有对应关系的局部特征量的对，检索精度变差。

另外，在专利文献2的情况下存在如下问题：当多余的区域被摄像或图像存在变形时，特征量的变动容易变大，有时图像不匹配。

本发明是为了解决如上所述的问题而完成的，其目的在于得到一种图像检索装置和图像检索方法，即使是多余的区域被摄像或存在变形等的查询图像也能够正确地检索与该查询图像相似的图像。

另外，本发明的目的在于得到一种图像处理装置和图像处理方法，对多余的区域被摄像或存在变形等的查询图像实施图像处理，从而能够正确地检索与该查询图像相似的图像。

本发明所涉及的图像检索装置设置有：图像特征量抽出单元，抽出作为检索对象的图像的查询图像内的特征点，并且抽出该特征点周边的局部特征量；特征量记录单元，记录有参照图像内的特征点以及特征点周边的局部特征量；特征点对搜索单元，在由图像特征量抽出单元抽出的查询图像内的特征点和记录在特征量记录单元中的参照图像内的特征点中，搜索局部特征量对应的特征点的对；以及变换参数计算单元，使用由特征点对搜索单元搜索出的特征点的对，计算在图像变换中使用的变换参数，其中，匹配判定单元利用由变换参数计算单元计算出的变换参数，对由图像特征量抽出单元抽出的查询图像内的特征点的位置进行变换，并将位置变换后的查询图像内的特征点与参照图像内的特征点进行比较，由此进行查询图像与参照图像的匹配判定。

根据本发明，构成为设置有：图像特征量抽出单元，抽出作为检索对象的图像的查询图像内的特征点，并且抽出该特征点周边的局部特征量；特征量记录单元，记录有参照图像内的特征点以及特征点周边的局部特征量；特征点对搜索单元，在由图像特征量抽出单元抽出的查询图像内的特征点和记录在特征量记录单元中的参照图像内的特征点中，搜索局部特征量对应的特征点的对；以及变换参数计算单元，使用由特征点对搜索单元搜索出的特征点的对，计算在图像变换中使用的变换参数，其中，匹配判定单元利用由变换参数计算单元计算出的变换参数，对由图像特征量抽出单元抽出的查询图像内的特征点的位置进行变换，并将位置变换后的查询图像内的特征点与参照图像内的特征点进行比较，由此进行查询图像与参照图像的匹配判定，因此具有如下效果：即使是多余的区域被摄像或存在变形等的查询图像，也能够正确地检索与该查询图像相似的图像。

附图说明

图1是表示本发明的实施方式1的图像检索装置的结构图。

图2是表示本发明的实施方式1的图像检索装置中的图像匹配部3的处理内容的流程图。

图3是表示本发明的实施方式1的图像检索装置中的变换参数计算部12的处理内容的流程图。

图4是表示查询图像中的9个特征点Q₁～Q₉的投影变换例的说明图。

图5是表示特征点的对应关联例子的说明图。

图6是表示本发明的实施方式2的图像检索装置中的特征点对搜索部11的处理内容的流程图。