[发明专利]基于图像的搜索方法、装置、电子设备及存储介质

权利要求书

1.一种基于图像的搜索方法，包括：

获取用户输入的待搜索图像；

对所述待搜索图像进行主要搜索意图的识别，得到所述待搜索图像的主要搜索意图；

对所述待搜索图像进行多搜索意图的识别，得到所述待搜索图像的多个搜索意图；

对所述主要搜索意图和所述多个搜索意图进行融合处理，得到所述待搜索图像的多个候选搜索意图；

对所述多个候选搜索意图进行调整，得到所述待搜索图像的多个目标搜索意图；

分别输出各所述目标搜索意图的搜索结果。

2.根据权利要求1所述的方法，其中，所述对所述待搜索图像进行主要搜索意图的识别，得到所述待搜索图像的主要搜索意图，包括：

利用预先训练的单标签多分类模型对所述待搜索图像进行主要搜索意图的识别，得到所述待搜索图像的主要搜索意图。

3.根据权利要求1所述的方法，其中，所述对所述待搜索图像进行多搜索意图的识别，得到所述待搜索图像的多个搜索意图，包括：

利用预先训练的多标签分类模型对所述待搜索图像进行多搜索意图的识别，得到所述待搜索图像的多个搜索意图。

4.根据权利要求3所述的方法，其中，所述多个搜索意图中各所述搜索意图对应有重要程度分数值；

所述对所述主要搜索意图和所述多个搜索意图进行融合处理，得到所述待搜索图像的多个候选搜索意图，包括：

将所述多个搜索意图中与所述主要搜索意图相同的搜索意图删除；

对所述多个搜索意图按照重要程度分数值降序排序，得到搜索意图序列；

将所述主要搜索意图添加到所述搜索意图序列的头部，得到多个候选搜索意图。

5.根据权利要求4所述的方法，其中，所述对所述多个候选搜索意图进行调整，得到所述待搜索图像的多个目标搜索意图，包括：

在所述待搜索图像中文本区域的面积占比不大于预设面积阈值的情况下，针对所述多个候选搜索意图中的每一候选搜索意图，按照该候选搜索意图的第i个子搜索意图对所述待搜索图像进行检索，其中，i的初始值为1；

在检索到该候选搜索意图的第i个子搜索意图的检索结果的情况下，将该候选搜索意图的第i个子搜索意图作为该候选搜索意图对应的目标搜索意图；

在未检索到该候选搜索意图的第i个子搜索意图的检索结果的情况下，将i增加1，返回步骤：按照该候选搜索意图的第i个子搜索意图对所述待搜索图像进行检索，继续执行。

6.根据权利要求4所述的方法，其中，所述对所述多个候选搜索意图进行调整，得到所述待搜索图像的多个目标搜索意图，包括：

在所述待搜索图像中文本区域的面积占比大于预设面积阈值的情况下，将所述多个候选搜索意图中文字类型的候选搜索意图排列到非文字类型的候选搜索意图的前面，得到所述待搜索图像的多个目标搜索意图，其中，一种搜索意图对应一种检索类型。

7.根据权利要求4所述的方法，其中，所述对所述多个候选搜索意图进行调整，得到所述待搜索图像的多个目标搜索意图，包括

在所述待搜索图像只包含文字的情况下，对所述待搜索图像中的文字进行识别，得到文本信息；

对所述文本信息进行分类，得到所述文本信息对应的文本类型；

将所述多个候选搜索意图中与所述文本类型相同的搜索意图，调整到所述多个候选搜索意图的最前面，得到所述待搜索图像的多个目标搜索意图，其中，一种搜索意图对应一种检索类型。