[发明专利]一种融合文本语义和视觉内容的Web人像检索方法

权利要求书

1.一种融合文本语义和视觉内容的Web人像检索方法，其特征在于：将文本和视觉特征结合运用，该方法其具体步骤如下：

步骤一  网络爬行形成本地图像库

网络爬行向商业搜索引擎服务器提交“查询串”实现基于HTTP协议的连接和下载功能，下载商业图片搜索引擎返回结果中的图片及相关网页作为本地图像库，同时抽取返回结果中的相关网页的关键标签形成后期文本处理使用的XML文件；

步骤二  进行图片内容和文本语义的挖掘

采用AdaBoost人脸检测技术对本地图像库中的图片进行检测，得到指示是否含有人脸的布尔型向量值；由XML文件中的若干语义信息元作为布尔型向量模型中的若干分量组成布尔型文档向量模型，根据布尔型文档向量中的每一个分量模型，得到本地图像库中每一幅图片所对应的语义信息元向量，该语义信息元向量中的每一个分量的布尔值指示“查询串”是否出现在相应的语义信息元中；然后，确定对应于语义信息元向量的权值向量，该权值向量为经验权值向量或者给予PLSA的动态加权方法得到的权值向量；

步骤三  视觉和文本特征的动态融合

为指示是否含有人脸的布尔型向量赋予一个权值向量，将每幅图片的指示是否含有人脸的布尔型向量结合每幅图片的语义信息元向量形成一个融合的布尔型特征向量，将指示是否含有人脸的布尔型向量对应的权值向量结合对应于语义信息元向量的权值向量形成总权值向量，计算特征向量和总权值向量的点积，该点积反映了图片和“查询串”的相关度，根据相关度重新排序商业图片搜索引擎服务器返回结果中的图片，并反馈给用户。