[发明专利]一种搜索内容资源的方法、装置及服务器

说明书

本发明提出一种搜索内容资源的方法、装置和服务器。所述方法包括：获取查询图片的文本特征和视觉特征；比较所述查询图片的文本特征与各内容资源的文本特征的文本相似度；比较所述查询图片的视觉特征与各内容资源的视觉特征的视觉相似度；根据所述查询图片与各内容资源的文本相似度和视觉相似度，从各内容资源中确定出内容搜索结果。本发明实施例查询的技术方案在搜索内容的过程中结合了文本的相似度和视觉相似度，这样可以准确地搜索到所需的内容资源。

技术领域

本发明涉及计算机网络技术领域，尤其涉及一种搜索内容资源的方法、装置及服务器。

背景技术

随着计算机技术的发展，出现了许多新的内容资源，例如全景(panorama)图片、全景视频、三维(3D)模型、三维动画及其在虚拟现实(virtual reality，VR)及增强现实(augmented reality，AR)场景下的展示等。同时，摄影技术(如鱼眼镜头)、建模技术和编程工具也在不断发展，这就使得产生上述内容资源越来越容易。在互联网上，这种新的内容资源也越来越多的出现。与传统的文本、二维图片、普通视频和音频等)相比，这些内容资源具有连贯性、多线性、多角度、临场感、大空间、高交互、信息即时性、线上联动线下等优点。

传统的互联网搜索技术主要利用文本信息对海量网页内容进行索引。典型地，利用词频TF-IDF(term frequency–inverse document frequency，词频-逆向文件频率)以及词向量(word2vec)技术等，在网页库中建立文字索引，并搜索内容匹配用户文本查询(query)的网页。随着图片、视频内容的大量出现以及深度神经网络技术的发展，还出现了图片搜索、语音搜索和音乐搜索等。

然而，针对上文提到的新的内容资源，由于其形态超越了文本、普通二维图片、视频、音乐的表达空间，用户很难方便、快捷地使用当前的搜索引擎技术搜索这些内容资源。

发明内容

本发明实施例提供一种搜索内容资源的方法、装置及服务器，以解决或缓解背景技术中的一项或多项以上技术问题，至少提供一种有益的选择。

第一方面，本发明实施例提供了一种搜索内容资源的方法，包括：

获取查询图片的文本特征和视觉特征；

比较所述查询图片的文本特征与各内容资源的文本特征的文本相似度；

比较所述查询图片的视觉特征与各内容资源的视觉特征的视觉相似度；

根据所述查询图片与各内容资源的文本相似度和视觉相似度，从各内容资源中确定出内容搜索结果。

结合第一方面，本发明在第一方面的第一种实施方式中，根据所述查询图片与各内容资源的文本相似度和视觉相似度，从各内容资源中确定出内容搜索结果，包括：

根据所述查询图片与各内容资源的文本相似度和视觉相似度，得到所述查询图片与各内容资源的总体相似度；

根据所述查询图片与各内容资源的总体相似度，从各内容资源中确定出内容搜索结果。

结合第一方面的第一种实施方式，在第一方面的第二种实施方式中，根据所述查询图片与各内容资源的文本相似度和视觉相似度，得到所述查询图片与各内容资源的总体相似度，包括：

对所述查询图片与各内容资源的文本相似度和视觉相似度按照设定阈值进行过滤；

根据过滤后的所述查询图片与各内容资源的文本相似度和视觉相似度，得到所述查询图片与各内容资源的总体相似度。

结合第一方面，本发明在第一方面的第三种实施方式中，获取查询图片的文本特征，包括：

采用图片分类模型对所述查询图片的图片内容进行识别，从所述查询图片的中提取文本特征；或