[发明专利]细粒度图像相似性

摘要

用于确定细粒度图像相似性的方法、系统和装置。在一个方面，一种方法包括通过选择第一、第二和第三图像的图像三元组来在图像三元组上训练图像嵌入函数；由所述图像嵌入函数生成所述第一、第二和第三图像的特征的第一、第二和第三表示；基于所述特征的第一表示和所述特征的第二表示，确定所述第一图像对所述第二图像的第一相似性度量；基于所述特征的第一表示和所述特征的第三表示，确定所述第一图像对所述第三图像的第二相似性度量；基于所述第一和第二相似性度量确定所述图像三元组的图像嵌入函数的性能度量；以及基于所述图像三元组的性能度量来调整所述图像嵌入函数的参数权重。

主权项

一种由数据处理装置执行的计算机实现的方法，所述方法包括：在图像三元组上迭代地训练图像嵌入函数，所述嵌入函数包括参数权重的集合，所述参数权重在输入图像上进行操作以产生所述图像的特征的表示作为输出，所述训练的每个迭代包括：选择图像三元组，每个图像三元组是第一图像、第二图像和第三图像的组合，其中度量所述第一图像与所述第二图像的相似性的第一成对相关性得分大于度量所述第一图像与所述第三图像的相似性的第二成对相关性得分；对于每个图像三元组：提供所述第一图像、第二图像和第三图像中的每一个作为所述图像嵌入函数的输入；通过所述图像嵌入函数生成所述第一图像的特征的第一表示、所述第二图像的特征的第二表示和所述第三图像的特征的第三表示；基于特征的所述第一表示和特征的所述第二表示，确定度量所述第一图像与所述第二图像的相似性的第一相似性度量；基于特征的所述第一表示和特征的所述第三表示，确定度量所述第一图像与所述第三图像的相似性的第二相似性度量；基于所述第一相似性度量和第二相似性度量，确定所述图像三元组的所述图像嵌入函数的性能度量；基于所述图像三元组的所述性能度量，调整所述图像嵌入函数的所述参数权重；及执行训练的另一个迭代，直到发生停止事件。