[发明专利]滑动窗口下基于位置top-k关键词查询的快速索引方法及系统有效
申请号: | 201710864358.2 | 申请日: | 2017-09-22 |
公开(公告)号: | CN107633068B | 公开(公告)日: | 2020-04-07 |
发明(设计)人: | 毛睿;李荣华;陆敏华;王毅;罗秋明;商烁;刘刚 | 申请(专利权)人: | 深圳大学 |
主分类号: | G06F16/903 | 分类号: | G06F16/903;G06F16/9537 |
代理公司: | 上海宏京知识产权代理事务所(普通合伙) 31297 | 代理人: | 王函 |
地址: | 518060 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种滑动窗口下基于位置top‑k关键词查询的快速索引方法及系统,包括构建数据索引模型和查询;构建数据索引模型包括如下:确定四叉树覆盖的地理范围和节点分裂规则;接受数据流,向节点插入数据;符合分裂规则的节点分裂,数据插入生成完整四叉树;叶节点存储倒排索引;非叶节点存储其子节点的MG聚合摘要;调整四叉树结构;查询包括如下:初始化结果集;剪枝操作得到候选结果集;优先队列中取最大分值的词开始计算,从根节点开始遍历直到在叶节点找到其精确分值,放入队列,重复直到优先队列前k个词不再变化。本发明能有效降低成本、提升查询速度,可同时根据词频和位置邻近度有效修剪搜索空间,且能处理具有高到达率的地理文本数据流。 | ||
搜索关键词: | 滑动 窗口 基于 位置 top 关键词 查询 快速 索引 方法 系统 | ||
【主权项】:
一种滑动窗口下基于位置top‑k关键词查询的快速索引方法,其特征在于,包括构建数据索引模型阶段以及查询阶段;所述构建数据索引模型阶段具体包括如下步骤:步骤一,确定四叉树覆盖的地理范围以及节点分裂规则;步骤二,接受数据流,向节点中插入数据;步骤三,符合步骤一节点分裂规则的节点分裂,数据插入不断生成完整的四叉树;步骤四,对每一个叶节点,统计其词频,存储倒排索引;步骤五,对每一个非叶节点,存储其所有子节点的MG聚合摘要信息;步骤六,针对步骤四和步骤五两步的数据插入过程中,在这个过程中需要维护滑动窗口的大小,删掉具有最旧时间戳的数据项,添加最新的数据,调整四叉树的索引结构;所述查询阶段具体包括如下步骤:第一步,输入构建好的四叉树和查询节点以及k,建立一个列表作为结果集,初始化为空;k表示用户可指定的结果关键词的个数;第二步,根据构建好的四叉树的根节点的MG摘要以及k进行剪枝操作,得到候选结果集;第三步,使用一个最大堆C存储候选结果集中的每个词语以及其分值;C是存储所有候选词的一个优先队列;第四步,当结果集的大小小于k时,依次取出C中的队列头的词语,从根节点遍历到叶节点,每遍历一层得到比原来的分值小的值就替换原始值,直到遍历到叶节点找到该词语的精确分值,放入队列;第五步,循环第四步,当队列头的词语的分值等于该词在叶节点的精确分值,放入结果集中;第六步,当结果集的大小等于k时,返回结果集。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳大学,未经深圳大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710864358.2/,转载请声明来源钻瓜专利网。