[发明专利]一种支持高维数据实时有偏查询的并行索引方法有效
申请号: | 201310041516.6 | 申请日: | 2013-02-01 |
公开(公告)号: | CN103455531A | 公开(公告)日: | 2013-12-18 |
发明(设计)人: | 王寅峰;邓果丽;许志良 | 申请(专利权)人: | 深圳信息职业技术学院 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 深圳中一专利商标事务所 44237 | 代理人: | 梁珣 |
地址: | 518029 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明适用于索引技术领域,提供了一种支持高维数据实时有偏查询的并行索引方法,所述方法包括:查询系统使用MapReduce等方法对数据属性进行特征抽取作为输入,由查询系统中的多个索引服务器采用数据密度弹性划分数据桶的哈希函数构建并行索引,通过有向聚类映射方法将有偏查询所携带的距离改变投影以映射到该查询系统的多个索引服务器中;如果所述映射的误差超过用户能够接受的范围,查询系统将有偏查询提交并行组合的索引服务器分别处理;并行组合的索引服务器按用户给出的权重的比例分别返回经筛选后的结果,然后对所有返回的结果进行计算与合并,确保在确定的时间内返回查询响应的结果。本发明技术方案具有能够处理海量数据的优点。 | ||
搜索关键词: | 一种 支持 高维数 据实 时有 查询 并行 索引 方法 | ||
【主权项】:
一种支持高维数据实时有偏查询的并行索引方法,其特征在于,所述方法包括:查询系统使用MapReduce对数据属性进行特征抽取作为输入,由查询系统中的多个索引服务器采用数据密度弹性划分数据桶的哈希函数,优化LSH算法分别构建数据的向量索引,其中,各个索引服务器的向量索引之间形成正交关系;查询系统接收用户的有偏查询,通过有向聚类映射方法将有偏查询所携带的距离改变投影以映射到该查询系统的多个索引服务器中;如果所述映射的误差超过用户能够接受的范围,查询系统将有偏查询提交并行组合的索引服务器分别处理;并行组合的索引服务器按所述有偏查询中的用户给出的权重的比例分别返回经筛选后的结果,然后对所有返回的结果进行计算与合并,确保在确定的时间内返回查询响应的结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳信息职业技术学院,未经深圳信息职业技术学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310041516.6/,转载请声明来源钻瓜专利网。
- 上一篇:一种智能配电网模型库系统
- 下一篇:服饰搜索方法及系统